Estes termos descrevem como um detetor de IA pode estar certo ou errado. São úteis para interpretar qualquer resultado do Pangram.
Os termos
- Falso positivo (FP) — texto escrito por humanos que foi incorretamente identificado como sendo da IA.
- Falso negativo (FN) — Texto escrito por IA que o detetor não identifica.
- Precisão — de tudo o que foi identificado como IA, quanto era realmente IA. Uma elevada precisão significa poucos falsos positivos.
- Precisão — a frequência com que o detetor acerta, em termos globais, tanto em textos gerados por IA como em textos escritos por humanos.
Precisão = TP / (TP + FP)
Precisão = (TP + TN) / (TP + TN + FP + FN)
Taxa de falsos positivos (FPR) = FP / (FP + TN)
Taxa de falsos negativos (FNR) = FN / (FN + TP)