Measure Model Performance

Measure Model Performance
type I error：第一種の過誤：False positive（FP）
本当は帰無仮説が真であるのにもかかわらず、帰無仮説を偽として棄却してしまう誤りのこと。

type II error：第二種の過誤：False negative (FN）
本当は帰無仮説が偽であるのにもかかわらずそれを真として棄却しない誤りのこと。

precision (P) = TP / (TP + FP)
recall (R) = TP / (TP + FN)
accuracy = (TP + TN) / (TP + TN + FP + FN)
F1 score = (2 × P × R) / (P + R)

TPR = TP / (TP + FN)＝recall (R)
FPR = FP / (FP + TN)