특이도 (Specificity) 는 negative example 을 얼마나 잘 찾아내는가를 나타내는 척도이다.
1 min read
특이도 (Specificity) 는 negative example 을 얼마나 잘 찾아내는가를 나타내는 척도이다.
TrueNegative+FalsePositiveTrueNegative...PR (True Positive Rate, 민감도 = Recall): 실제 positive 중 모델이 positive 로 맞춘 비율 FPR (False Positive Rate, 1 − Specificity): 실제 negative 중 모델이 positive 로 잘못 판정한 비율
... 분류된 결과 중 predicted positive 의 negative 와 positive 만 신경 씀 Recall: predicted positive 에서 positive 만 신경 씀 Specificity: 전체 population 의 negative 에서 negative 예측을 맞춘 비율
Specificity 가 실제 negative 를 negative 로 맞힌 비율이라면, FPR 은 그 반대 방향의 오류율이다.
...ation metric 을 볼 때는 먼저 “무엇을 positive 로 정의했는가”를 확인해야 한다. Positive class 를 어떻게 잡느냐에 따라 Recall, precision, Specificity 의 해석이 달라진다. Sensitivity 와 Specificity Sensitivity 는 실제 positive 중 모델이 positive 로 맞힌 비율이다. 같은 값을 Recall ...
AUC AUC 는 ROC 곡선 아래의 면적이다. ROC 곡선이 임계값을 0 에서 1 까지 훑으면서 그려지는 곡선이므로, 그 아래 면적은 “임계값을 어디에 두든 평균적으로 얼마나 잘 구분하는가” 를 한 숫자로 요약한 값이 된다.
FPR FPR(False Positive Rate)은 실제 negative 중에서 모델이 positive 로 잘못 예측한 비율이다.
Terminology True Positive (TP) A test result that correctly indicates the presence of a condition or characteristic 예시 1) 실제로 병이 있는 환자를 병이 있다고 정확히 예측한 것 예시 2) 어떤 아이템을 추천했을 때,...
Laymen 정의 모델이 positive 하다고 예측한 것들 중에서, 얼마나 많은 true positive 가 존재하는가? Formulation \displaystyle\frac{\text{True Positive}}{\text{True Positive + False Positive}} In Statistic...
Recall은 실제 positive example 중에서 모델이 positive로 찾아낸 비율이다. binary classification에서는 True Positive Rate(TPR), medical diagnosis에서는 sensitivity라고도 부른다.
ROC(Receiver Operating Characteristic) curve 는 classification 의 모델의 성능을 표현하기 위한 curve 이다. 어떻게 활용하냐에 따라서 multi-class 또는 multi-label 분류기의 성능 측정까지 가능하다.
lift 규칙은 다음과 같이 정의된다.
Confidence는 association rule이 얼마나 자주 참이 되는지 보는 지표다. 규칙 X \Rightarrow Y가 있을 때, X를 포함한 transaction 중에서 Y도 함께 포함하는 비율을 뜻한다.
\Delta^{2}=(\mathbf{x}-\boldsymbol{\mu})^{\mathrm{T}}\mathbf{\Sigma}^{-1}(\mathbf{x}-\boldsymbol{\mu}) 만약 \mathbf{\Sigma} 가 identity matrix 인 경우, \boldsymbol{\mu} 부터...
KS 콜모고로프 - 스미르노프 지표. 예측 모델을 검증하는 데 사용되는 가장 중요한 메트릭 중 하나입니다. 특히 Banking, Financial services and Insurance (BFSI) 도메인에서 자주 사용됩니다.