mean Average Precision

평균 평균 정밀도?
mean과 Average를 두 번 쓸 이유가 있나?
다르다고 합니다.

precision

Precision = Positive로 예측한것 중 진짜 True인것
$precision = \frac{TP}{TP+FP}$

recall

원래 True 중에 얼마나 Positive라고 맞췄나?
$recall = \frac{TP}{TP+FN}$

precision과 recall은 trade off

F1 score

recall과 precision의 조화평균

1종 오류

알게된 점

Accuracy만 보면 안되는 이유

data가 imbalance 할 때. ex) 하루에 실제로 눈이 5일만 올 때
일년 내내 눈이 안온다고 예측해도 정확도 95% 허허 360/365 정확도가 되는 기적..

그래서 Precision과 Recall도 봐야 된다.

Recall 보는게 나을때

전제: 과잉진료가 그나마 낫다. 하나라도 빼먹지 말자!
암환자를 찾아내는 모델은 과잉진료가 차라리 낫다.

Precision 보는게 나을때

전제: 과잉진료가 별로다. 좀 빼먹어도 된다
충치환자를 찾아내는 모델은 과잉진료가 차라리 낫다.