데이터 사이언티스트가 되기 위한 여정

목차 1. 오차행렬(confusion matrix) 2. 정밀도(precision)와 재현율(recall) 3. 임계값(threshold)에 따른 정밀도 재현율의 Trade-Off 4. ROC/AUC 극강의 헷갈림, 분류 모델의 평가지표인 정밀도와 재현율에 대해 알아보도록 하겠습니다. 정밀도와 재현율에 대해 이해하려면 먼저 오차행렬(confusion matrix)에 대해 알아야 합니다. 1. 오차행렬 (confusion matrix) 오차행렬을 통해 이진분류 모델이 수행한 예측 중 오류가 몇 개인지, 어떤 유형의 오류가 발생했는지를 확인할 수 있습니다. 위 사진을 보면 오차행렬이 TN, TP, FN, FP 4가지로 구성된 것을 알 수 있습니다. 두 번째 알파벳(Positive/Negative)이 모델이 ..

파이썬 머신러닝 2024. 1. 1. 22:05

목차 1. 교차검증이란 2. K-Fold 2-1. Stratified K-Fold 3. Cross_val_score() 4. GridSearchCV 1. 교차검증이란 머신러닝을 수행할 때 흔히 데이터를 학습 데이터와 테스트 데이터로 나눈 후, 학습 데이터를 통해 모델을 학습하고 테스트 데이터로 최종 평가를 하게된다. 이 때 테스트 데이터에 대한 예측만 잘하도록(과적합) 모델이 설계 될 수 있는데, 이런 문제를 개선하기 위해 학습 데이터를 통한 교차검증을 수행하게 된다. 학습 데이터와 테스트 데이터를 나눈 후, 학습 데이터를 다시 학습 데이터와 검증 데이터로 나눈다. 이 때 검증 데이터는 테스트 데이터처럼 분리시켜 놓는 것이 아니라, 데이터의 모든 부분들이 검증데이터로 사용될 수 있도록 한다(우연히 데이터..

파이썬 머신러닝 2024. 1. 1. 15:57