[개정판] 파이썬 라이브러리를 활용한 머신러닝

★★★★★ 검증된 내용, 훌륭한 번역자, 그리고 좋은 편집(hawkm* 님)
★★★★ 개정판은 인기없는 책은 나올 이유가 없다(ghcjs* 님)
♥♥♥♥ 올 컬러로 깔끔한 해설(bi**cle2 님)

‘[개정판] 파이썬 라이브러리를 활용한 머신러닝’은 scikit-learn의 코어 개발자이자 배포 관리자인 안드레아스 뮐러^{Andreas Mueller}와 매쉬어블의 데이터 과학자인 세라 가이도^{Sarah Guido}가 쓴 ‘Introduction to Machine Learning with Python‘ 번역서입니다.

사이킷런의 최신 버전에 맞추어 저자들이 새롭게 릴리스한 4판을 기준으로 개정판이 출간되었습니다. 주요한 변경 사항은 다음과 같습니다.

OneHotEncoder와 ColumnTransformer, make_column_transformer
KBinsDiscretizer
cross_validate
Pipeline 캐싱
그외 사이킷런 0.19, 0.20에서 추가, 변경된 내용 반영
(한국어판 부록) 배깅, 엑스트라 트리, 에이다부스트
(한국어판 부록) QuantileTransformer와 PowerTransformer
(한국어판 부록) 반복 교차 검증

특별히 개정판에서는 그래프를 손쉽게 구분할 수 있도록 풀 컬러 인쇄를 하였습니다! 흔쾌히 컬러 인쇄를 결정해 주신 한빛미디어 출판사에 감사드립니다.

온라인/오프라인 서점에서 판매중입니다. [YES24], [교보문고], [한빛미디어]
480 페이지, 종이책: ~~32,000원~~—>28,800원, 전자책 25,600원
이 책에 실린 코드는 깃허브에서 주피터 노트북으로 볼 수 있습니다. [github], [nbviewer]
이 책의 코드는 scikit-learn 0.20.2, 0.21.1, 0.22 버전에서 테스트 되었습니다.
저자 안드레아스 뮐러와의 인터뷰는 한빛미디어 홈페이지에서 볼 수 있습니다.
1판의 1장과 2장을 ‘파이썬 머신러닝‘ 페이지에서 읽을 수 있습니다.
교보문고 Dev READIT 2018에 선택되어 이 책에 대한 칼럼을 썼습니다.

이 페이지에서 책의 에러타와 scikit-learn 버전 변경에 따른 바뀐 점들을 계속 업데이트 하겠습니다. 구글 그룹스 파이썬 머신러닝 메일링 리스트에 가입하시면 책의 에러타나 수정사항을 자동으로 수신할 수 있습니다.

이 책에 대해 궁금한 점이나 오류가 있으면 이 페이지 맨 아래 ‘Your Inputs’에 자유롭게 글을 써 주세요. 또 제 이메일을 통해서 알려 주셔도 되고 구글 그룹스 파이썬 머신러닝 Q&A에 글을 올려 주셔도 좋습니다.

적바림(미처 책에 넣지 못한 내용을 추가하고 있습니다)

자주하는 질문
- SVM의 목적함수를 풀기 위해 어떤 알고리즘을 사용하나요?
- 그래디언트부스팅의 predict_proba() 메서드에서 어떻게 확률을 계산하나요?
- 결정 트리에서 특성 중요도(feature_importances_)는 어떻게 계산하나요?
- mglearn 라이브러리를 어떻게 설치하나요?
- 우분투 리눅스에서 konlpy 설치하기
- mglearn을 임포트할 때 cannot import name 'imread' 에러가 납니다.
p116에 언급된 랜덤 포레스트에서 어떤 데이터 포인트가 부트스트랩 샘플에 포함되지 않을 확률
p152에 언급된 네스테로프 모멘텀에 대한 자세한 설명
p443에 언급된 넷플릭스 데이터셋의 다운로드 링크
p286에 언급된 F-값의 유도식
MLPClassifier을 사용한 다중 레이블 분류

감사합니다! 🙂

Outputs (aka. errata)

1~29: 2쇄에 반영되었습니다.

(p104) 그림 2-24와 2-25가 잘못 되었습니다. 다음 그림으로 바꾸어야 합니다.(현*웅 님)
그림 2-24

그림 2-25
(p124) 아래에서 두 번째 줄의 주석 번호를 48에서 51로 바꿉니다.(현*웅 님)
(p36) Note 박스의 첫 번째 줄 끝에서 ‘네 라이브러리’를 ‘다섯 라이브러리’로 정정합니다.(현*웅 님)
(p156) 마지막 줄 끝의 주석 번호를 64에서 68로 바꿉니다.(현*웅 님)
(p161) NOTE 박스 끝의 주석 번호를 78에서 79로 바꿉니다.(현*웅 님)
(p345) CAUTION 박스 끝의 주석 번호를 11에서 12로 바꿉니다.(현*웅 님)
(p375) 마지막 줄의 주석 번호를 33에서 34로 바꿉니다.(현*웅 님)
(p425) 페이지 중간에 있는 주석 번호를 12에서 14로 바꿉니다.(현*웅 님)
(p447) 마지막 줄에 “컴퓨터에 장착된 CPU 코어를 최대한 활용하기 위해 n_jobs=-1로 지정했습니다”를 “Mecab은 Pickle 오류가 발생하기 때문에 n_jobs=1로 지정했습니다”로 정정합니다.(현*웅 님)
(p108) 주석 40에서 “graphviz 모듈은 pip install graphviz 명령으로”를 “graphviz 모듈은 conda install graphviz 또는 pip install graphviz 명령으로”로 수정합니다.(현*웅 님)

(p281) Out [12]의 출력을 다음과 같이 변경합니다.

[[1. 0. 0. 0. 1. 0.]
[0. 1. 0. 0. 0. 1.]
[0. 0. 1. 0. 1. 0.]
[0. 1. 0. 1. 0. 0.]]

(p71) 주석 6번의 $R^2$ 공식에서 두 번째 항의 분자가 $\sum (y-y)^2$ 이 아니고 $\sum (y-\hat{y})^2$ 입니다.(서* 님)
(p86) 주석 20번의 두 번째 줄에서 “로직스틱 회귀”를 “로지스틱”로 정정합니다.(서* 님)
(p103~104) 103 페이지 마지막 문단과 104 페이지 첫 문단에서 0.0596을 0.06으로 정정합니다.(서* 님)
(p157) In[104]의 두 번째 print 함수에서 “훈련 세트 정확도”를 “테스트 세트 정확도”로 정정합니다.(서* 님)
(p291) 첫 번째 줄에서 “학습된 기울기는 음수이고”를 “학습된 기울기는 양수이고”로 정정합니다.(서* 님)
(p295) 마지막 줄에서 “아무런 변환도 거치치 않은”을 “아무런 변환도 거치지 않은”으로 정정합니다.(서* 님)
(p303) 주석 24번에서 “정보 누설에 대한 자세한 내용은 376쪽”을 “정보 누설에 대한 자세한 내용은 398쪽”으로 정정합니다.(서* 님)
(p123) Out[75]의 두 번째 줄에서 “훈련 세트 정확도”를 “테스트 세트 정확도”로 정정합니다.
(p328) 주석 3번에서 “cross_val_predct(logreg, iris.data, iris.target, cv=5)”를 “cross_val_predict(logreg, iris.data, iris.target, cv=5)”로 정정합니다.(서* 님)
(p344) 페이지 중간에 “In[22] 코드의 결과와 대등합니다”를 “In[24] 코드의 결과와 대등합니다”로 정정합니다.(서* 님)
(p368) 맨 위 세 번째 줄에서 “ $f_1$ -점수가 0.14이지만, … ‘9아님’ 클래스는 각각 0.90과 0.99라서”를 “ $f_1$ -점수가 0.12이지만, … ‘9아님’ 클래스는 각각 0.89과 0.99라서”로 정정합니다.(서* 님)
(p371) 첫 번째 문단 마지막에 제시된 “https://goo.gl/RaDS8Z“를 “https://bit.ly/2IfMILV“로 바꿉니다.(서* 님)
(p387) In[75]와 In[76] 코드에서 “roc_auc_score(y_test, grid.decision_function(X_test))”를 “average_precision_score(y_test, grid.decision_function(X_test))”로 정정합니다. In[76] 코드에서 GridSearchCV의 scoring 매개변수 값을 “roc_auc”에서 “average_precision“으로 정정합니다. 또한 Out[76]에서 “테스트 세트 AUC: 1.000“을 “테스트 세트 평균 정밀도: 0.996“으로, “테스트 세트 정확도: 1.000“을 “테스트 세트 정확도: 0.890“으로 정정합니다.(서* 님)
(p397, p399) 397페이지 첫 번째 문단과 399페이지 주석 7번에서 “검증 폴더“를 “검증 폴드“로 정정합니다.(서* 님)
(p427) 주석 15번에서 “Out[22]의 출력 결과가”를 “Out[23]의 출력 결과가”로 정정합니다.(서* 님)
(p444) 첫 번째 문단 마지막 부분에서 “keep_default_na=True로 지정하여”를 “keep_default_na=False로 지정하여”로 정정합니다.(서* 님)

(p441) In[45] 코드를 다음과 같이 수정합니다.

# 요구사항: spacy에서 표제어 추출 기능과 CountVectorizer의 토큰 분할기를 사용합니다.

# spacy의 언어 모델을 로드합니다
en_nlp = spacy.load('en', disable=['parser', 'ner'])

# spacy 문서 처리 파이프라인을 사용해 자작 토큰 분할기를 만듭니다
# (우리만의 토큰 분할기를 사용합니다)
def custom_tokenizer(document):
    doc_spacy = en_nlp(document)
    return [token.lemma_ for token in doc_spacy]

# 자작 토큰 분할기를 사용해 CountVectorizer 객체를 만듭니다
lemma_vect = CountVectorizer(tokenizer=custom_tokenizer, min_df=5)

(p366, 367, 369, 370, 384) 사이킷런 0.21 버전에서 classification_report 함수의 labels 매개변수가 지정되지 않거나 labels 매개변수로 전달된 클래스 레이블이 타깃값에 모두 포함되어 있다면 micro avg 대신에 같은 의미인 accuracy가 출력됩니다. 따라서 classification_report 함수 출력에서 “micro avg aa, bb, cc, dd“를 “accuracy cc, dd“로 바꾸어 주세요.
(p30) scipy.misc.imread 함수가 scipy 1.3.0 버전에서 삭제되었습니다. 대신 imageio.imread 함수를 사용하기 위해 imageio를 설치해야 합니다. pip 명령 맨 뒤에 imageio를 추가해 주세요.
```
$ pip install numpy scipy matplotlib ipython scikit-learn pandas pillow imageio
```
(p92) 사이킷런 0.22버전부터 LogisticRegression 클래스의 solver의 기본값이 lbfgs로 바뀌었습니다. 이 알고리즘은 L1 규제를 지원하지 않기 때문에 LogisticRegression 클래스에 L1 규제를 적용하려면 다른 solver를 지정해야 합니다. 따라서 In[47] 코드에서 LogisticRegression 클래스 매개변수에 solver='liblinear'를 추가합니다.
모델을 훈련할 때 반복 횟수를 늘리라는 경고가 출력되는 것을 막기 위해 max_iter 매개변수 값을 늘립니다.
1. p87의 In[41], p137의 In[80]: LinearSVC에 max_iter=5000 매개변수 추가
2. p135의 In[78]: LinearSVC에 max_iter=5000, tol=1e-3 매개변수 추가
3. p89의 In[43], p90의 In[44]와 In[45], p306의 In[51], p308의 In[55], p310의 In[57], p424의 In[18], p426의 In[22], p428의 In[25], p430의 In[29], p436의 In[39], p442의 In[47]: LogisticRegression에 max_iter=5000 매개변수 추가
4. p92의 In[47], p278의 In[8], p284의 In[17], p325의 In[5], p336의 In[2], p360의 In[46], p404의 In[23], p424의 In[17]: LogisticRegression에 max_iter=1000 매개변수 추가
5. p151의 In[95], p152의 In[97]: MLPClassifier에 max_iter=1000 매개변수 추가
6. p156의 In[102]: MLPClassifier에 max_iter=2000 매개변수 추가
7. p215의 In[38], p218의 In[42], p234의 In[59]: NMF에 max_iter=1000, tol=1e-2 매개변수 추가
(p156) Out[102] 아래에 출력된 ConversionWarning 메시지 삭제
사이키런 0.21 버전에서 사분위수보다 샘플 개수가 작을 때 적절히 처리하지 못하는 버그가 수정되었습니다. 샘플 개수가 1,000개보다 작을 때 경고 메시지를 출력하지 않기 위해 QuantileTransformer 클래스에 n_quantiles 매개변수를 지정합니다.
1. p183의 In[4], p185의 In[9], p186의 In[10]: QuantileTransformer에 n_quantiles=50 매개변수 추가
2. p185의 In[8]: QuantileTransformer에 n_quantiles=5 매개변수 추가
(p360) 사이킷런 0.24 버전에서 DummyClassifier의 strategy 매개변수 기본값이 stratified에서 prior로 변경된다는 경고를 피하기 위해 strategy='stratified' 매개변수를 추가합니다.
(p388) metrics.scorer 모듈이 사이킷런 0.24 버전에서 삭제됩니다. 맨 위 첫 줄의 “metrics.scorer 모듈의 SCORERS 딕셔너리를 봐도 됩니다” 문장과 In[77], Out[77]을 삭제합니다.

Your Inputs

답글 남기기 응답 취소

여기에 댓글을 입력하세요...

아래 항목을 채우거나 오른쪽 아이콘 중 하나를 클릭하여 로그 인 하세요:

이메일 (필수) (주소는 공개되지 않습니다)

이름 (필수)

웹사이트

WordPress.com의 계정을 사용하여 댓글을 남깁니다. ( 로그아웃 / 변경 )

Google의 계정을 사용하여 댓글을 남깁니다. ( 로그아웃 / 변경 )

Twitter의 계정을 사용하여 댓글을 남깁니다. ( 로그아웃 / 변경 )

Facebook의 계정을 사용하여 댓글을 남깁니다. ( 로그아웃 / 변경 )

취소

%s에 연결하는 중

This site uses Akismet to reduce spam. Learn how your comment data is processed.

	박해선 (넘파이 튜토리얼)
	그루돈 (넘파이 튜토리얼)
	겨울 (케라스 창시자에게 배우는 딥러닝)
	박해선 (핸즈온 머신러닝 1장, 2장)
	박해선 (케라스 창시자에게 배우는 딥러닝)
	광영 (핸즈온 머신러닝 1장, 2장)
	겨울 (케라스 창시자에게 배우는 딥러닝)
	박해선 (2.3.6 결정 트리의 앙상블)
	석인호 (2.3.6 결정 트리의 앙상블)
	박해선 (2.3.6 결정 트리의 앙상블)
	김태호 (2.3.6 결정 트리의 앙상블)
	박해선 (케라스 창시자에게 배우는 딥러닝)
	겨울 (케라스 창시자에게 배우는 딥러닝)
	박해선 (2.3 지도 학습 알고리즘)
	현비밀 (2.3 지도 학습 알고리즘)

텐서 플로우 블로그 (Tensor ≈ Blog)

머신러닝(Machine Learning), 딥러닝(Deep Learning) 그리고 텐서(Tensor) 또 파이썬(Python)

[개정판] 파이썬 라이브러리를 활용한 머신러닝

★★★★★ 검증된 내용, 훌륭한 번역자, 그리고 좋은 편집(hawkm* 님)
★★★★ 개정판은 인기없는 책은 나올 이유가 없다(ghcjs* 님)
♥♥♥♥ 올 컬러로 깔끔한 해설(bi**cle2 님)

Outputs (aka. errata)

Your Inputs

답글 남기기 응답 취소

★★★★★ 검증된 내용, 훌륭한 번역자, 그리고 좋은 편집(hawkm*** 님) ★★★★ 개정판은 인기없는 책은 나올 이유가 없다(ghcjs*** 님) ♥♥♥♥ 올 컬러로 깔끔한 해설(bi**cle2 님)

Outputs (aka. errata)

Your Inputs

이 글 공유하기:

이것이 좋아요:

답글 남기기 응답 취소

★★★★★ 검증된 내용, 훌륭한 번역자, 그리고 좋은 편집(hawkm* 님)
★★★★ 개정판은 인기없는 책은 나올 이유가 없다(ghcjs* 님)
♥♥♥♥ 올 컬러로 깔끔한 해설(bi**cle2 님)