Information Lake

파이썬에서 등분산성(등분산성) 검증은 두 개 이상의 그룹(데이터 집단)이 동일한 분산을 가지고 있는지 확인하는 통계적 검증 방법입니다. 등분산성 검증은 일반적으로 분산분석(ANOVA) 등의 통계적 가설 검정에 사용되며, 그룹 간에 유의한 차이가 있는지 확인하기 전에 반드시 수행되어야 하는 중요한 단계입니다. T-test할때 첫번째. 정규성 검정(shapiro) 두번째. 등분산성 검정(levene, bartlett) 을 한다. 등분산성 검정 방식 두가지 차이점이 뭘까? 정규분포를 따를때 - 이상치 데이터가 많다 : Levene(이상치가 있어도 안정적) - 이상치 데이터가 적다 : Bartlett(이상치에 민감하게 반응) 정규분포를 따르지 않을 때 - 그냥 Levene 또는 비모수적 방법 ----------..

데이터 표준화가 뭔지는 알겠는데 궁금증이 생긴다. 1. 무조건 표준화를 하면 좋은거 아닌가? - 군집분석(KNN, SVM 등), 인공신경망에는 필수적 2. 어떨때는 fit(), transform()을 나눠쓰고 어떨때는 fit_transform()을 쓰는 것인가? 한번에 fit_transform()으로 가는게 무조건 좋은것인가? - 학습, 테스트 데이터 분리전 처리가 간편함 3. 왜 transform() 이후에 커럼명을 다시 조합해주지? - ndarray로 반환되므로 세 가지의 궁금증에 대한 답을 아래 책에서 확인할 수 있었다. ㅁ 파이썬 머신러닝 완벽가이드 123p ~ 이렇게 가우시안 정규 분포를 가질 수 있도록 데이터를 변환하는 것은 몇몇 알고리즘에서 매우 중요합니다. 특히 사이킷런에서 구현한 RBF ..

반드시 알아야할 + 모든 것 책 제목으로 고르기 부담되는 단어들인데도, 꼭 추천하고 싶을 정도로 좋은 책이다. 목차를 살펴보면 1장 통계학 이해하기 2장 모집단과 표본추출 3장 변수와 척도 4장 데이터의 기술 통계적 측정 5장 확률과 확률변수 6장 확률분포 7장 가설검정 8장 분석 프로젝트 준비 및 기획 9장 분석 환경 세팅하기 10장 데이터 탐색과 시각화 11장 데이터 전처리와 파생변수 생성 12장 통계기반 분석 방법론 13장 머신러닝 분석 방법론 14장 모델 평가 총 620page 분석방법론에 들어가기 전에 충분히 많은 이론적 설명이 있다. 통계의 기본지식도 충실하고, 통계기반과 머신러닝 기반 분석방법론도 대부분 다 들어있다. 전체적으로 정말 짜임새 있는 좋은책이라고 두번 세번 추천하고 싶다. 코드위..

기대하던 레고 화성탐사선이 나왔다. 그것도 테크닉 버전으로다가! Wow 1132개 부품, 137,900원 https://www.lego.com/ko-kr/product/nasa-mars-rover-perseverance-42158 NASA 화성 탐사선 퍼서비어런스 42158 | 테크닉 | LEGO® Shop KR 레고® 테크닉 NASA 화성 탐사선 퍼서비어런스를 조립하고 재미있는 AR 앱 체험을 통해 NASA의 화성 미션에 대한 모든 것을 알아보아요 www.lego.com 화성에는 여러 탐사선이 활동을 했고 퍼서비어런스는 21년에 도착해서 인제뉴어티(드론)과 함께 아직 활동중이다. - perseverance 인내심 - ingenuity 기발한 재주, 재간, 독창성 2033년에 후속 프로젝트를 통해 샘플을..

import pandas_profiling을 했더니 아래와 같은 오류가 난다. DeprecationWarning: `import pandas_profiling` is going to be deprecated by April 1st. Please use `import ydata_profiling` instead. (사용종료 경고) 대신에 설명된 내용과 같이 ydata_profiling을 쓰면 된다. pip install -U ydata-profiling import ydata_profiling df.profile_report()

데이터분석, 통계 관련 책들입니다. 서점에서 찾아보실때 우선순위로 두시면 좋지 않을까 싶네요! 대세는 파이썬 1. 데이터 분석가가 반드시 알아야 할 모든 것 ★★★★★★★ - 수많은 파이썬, 머신러닝 도서들을 두고 One pick hidden gem - 다음 책도 기대되는 분! 옆에서 선배가 알려주는 것 같다. https://www.yes24.com/Product/Goods/116856857 데이터 분석가가 반드시 알아야 할 모든 것 - YES24 데이터 분석과 머신러닝의 각 업무 단계를 깊이 있게 이해하자!이 책은 데이터 분석의 기초 체력이라 할 수 있는 통계학부터 필수적인 머신러닝 기법까지를 다룬다. 처음 비즈니스 문제를 정의 www.yes24.com 2. 파이썬 머신러닝 완벽 가이드 ★★★★★ - ..

from sklearn.metrics import plot_roc_curve plot_roc_curve(clf, x_test, y_test) 실행하면 다음과 같은 에러가 난다. ImportError: cannot import name 'plot_roc_curve' from 'sklearn.metrics' (/usr/local/lib/python3.10/dist-packages/sklearn/metrics/__init__.py) 구글링 해보면 sklearn 버전 1.2부터 plot_roc_curve가 RocCurveDisplay로 바뀌었단다. 호출방식도 바뀌었음 --------------------------- Before sklearn 1.2: --------------------------- from ..

건축 관련 책들을 재미로 보다가 르코르뷔지에를 알게되었고. 아르떼 출판사의 클래식 클라우드 시리즈까지 흘러들어왔다. 일단 책이 작고 예쁘고 비싸다. 사진이 많다. 인문 기행이니깐 그 사람의 발자취를 따라 여행하는 기분으로 써내려간 책이라고 보면 된다. 31권까지 나와있고 총 100권이라니 ㄷㄷㄷ 31권중에 백남준도 있다. 내용은 10% 정도 부족한 느낌. 르코르뷔지에 건축가인데 막상 유명한 핵심 건축물들을 찍은 사진은 거의 없어서 실망했다는.. 작가마다 인물마다 케바케일듯 아르떼 출판산는 예쁘게 시리즈를 뽑아내는 기획력 하나는 대박인듯 유튜브로 작가가 직접 강의하는 내용도 있으니 꼭 참고!!! 결론은 추천