핸즈온 머신러닝 2판 3장 참고하자. 거기가 더 자세함!

Confusion Matrix

지표들

Accuracy(정분류율)

• 전체 중에서 올바르게 예측한 수

Recall(재현율)

• 실제 True 중에서 True로 예측한 비율

Precision(정밀도)

• True로 예측한 것 중에서 실제 True의 비율

재현율 정밀도 Trade off

• 따라서, 뭐가 더 중요하고 더 쓸모있는지는 해봐야 안다!

f1-score: precision과 recall의 조화 평균.

Classification Report

• 한눈에 쫘악
• 특히 살펴볼 것: precision, recall, f1-score, accuray

Curve

• 그래프 아래 면적으로 비교

PR 곡선(Precision Recall Curve)

PR 곡선 아래 면적: AP(Average Precision)

ROC 곡선

ROC 곡선 아래 면적: AUC(Area Under ROC)