Які відмінності між AUC та F1-балом?

F1 бал - це гармонійне середнє значення точності та відкликання. Вісь y відкликання - це справжня позитивна швидкість (яка також є відкликанням). Отже, колись класифікатори можуть мати низький рівень виклику, але дуже високий AUC, що це означає?

Які відмінності між AUC та F1-балом?

Оцінка F1 застосовується для будь-якої конкретної точки кривої ROC. Ця точка може представляти, наприклад, певне порогове значення у двійковому класифікаторі і, таким чином, відповідає певній величині точності та виклику.

Пам'ятайте, оцінка F - це розумний спосіб представити як відкликання, так і точність. Щоб показник F був високим, точність і відкликання повинні бути високими.

Таким чином, крива ROC є для різних рівнів порогів і має багато значень F балів для різних точок на її кривій.

AUC має розмірність [PRECISION] * [RECALL], і це площа під кривою ROC. F1 - це фіксована пара точності та відкликання. Так вони різні. Але є деякі зв’язки. Дивіться це: http://pages.cs.wisc.edu/~jdavis/davisgoadrichcamera2.pdf

На осі кривої ROC є істинною позитивної швидкості (нагадаємо, чутливість АКА) і помилкових спрацьовувань (помилкової тривоги) , а НЕ точності, АКА PPV, прогностична цінність позитивного результату .