Запитання з тегом «precision-recall»

У мене є набір даних з кількома мільйонами рядків і ~ 100 стовпців. Я хотів би виявити близько 1% прикладів у наборі даних, які належать до загального класу. У мене мінімальне обмеження точності, але через дуже асиметричну вартість я не надто захоплююсь будь-яким особливим відкликанням (до тих пір, поки мені …

15 machine-learning  classification  unbalanced-classes  precision-recall 

Я новачок у машинному навчанні. На даний момент я використовую класифікатор Naive Bayes (NB), щоб класифікувати невеликі тексти у 3-х класах як позитивні, негативні чи нейтральні, використовуючи NLTK та python. Провівши деякі тести, з набором даних, що складається з 300 000 екземплярів (16 924 позитивні, 7 477 негативів і 275 …

15 machine-learning  classification  naive-bayes  precision-recall 

Я намагаюся зрозуміти криву точності відкликання, я розумію, що таке точність і відкликання, але те, що я не розумію, це "базове" значення. Я читав це посилання https://classeval.wordpress.com/introduction/introduction-to-the-precision-recall-plot/ і я не розумію базову частину, як показано в "Кривій точності нагадування ідеального класифікатора", що це робить? і як це ми обчислимо? Це …

15 r  machine-learning  classification  precision-recall 

F1 бал - це гармонійне середнє значення точності та відкликання. Вісь y відкликання - це справжня позитивна швидкість (яка також є відкликанням). Отже, колись класифікатори можуть мати низький рівень виклику, але дуже високий AUC, що це означає? Які відмінності між AUC та F1-балом?

14 machine-learning  precision-recall  auc  accuracy 

Зачинено. Це питання поза темою . Наразі відповіді не приймаються. Хочете вдосконалити це питання? Оновіть питання, щоб воно було тематичним для перехресної перевірки. Закрито 8 місяців тому . Легко знайти площу обчислення пакету під ROC, але чи існує пакет, який обчислює площу за кривою точності нагадування?

14 r  precision-recall 

Я натрапляю на коефіцієнт кістки для подібності обсягу ( https://en.wikipedia.org/wiki/S%C3%B8rensen%E2%80%93Dice_coefficient ) та точності ( https://en.wikipedia.org/wiki/Accuracy_and_precision ). Мені здається, що ці два заходи однакові. Будь-які думки?

13 descriptive-statistics  roc  accuracy  precision-recall  auc 

Який найкращий спосіб пояснити, чому , наприклад, не є хорошим показником порівняно з F1?Precision+RecallPrecision+Recall\text{Precision} + \text{Recall}

12 precision-recall 

Я намагаюся вирішити завдання, яке називається пішохідним виявленням, і треную двійковий клацифер на двох позитивних категоріях - люди, негативи - на тлі. У мене є набір даних: кількість позитивів = 3752 кількість від’ємника = 3800 Я використовую поїзд \ test split 80 \ 20% і RandomForestClassifier форму scikit-learn з параметрами: …

12 classification  random-forest  unbalanced-classes  precision-recall  computer-vision 

Я хочу порівняти два алгоритми ранжування. У цих алгоритмах клієнт вказує деякі умови у своєму пошуку. Відповідно до вимог клієнта, цей алгоритм повинен призначити бал для кожного елемента в базі даних та отримати елементи з найвищими балами. Я читав різні теми, пов'язані з моїм запитанням на цьому веб-сайті, і шукав …

12 machine-learning  precision-recall  average-precision 

У мене є завдання пошуку даних, де я створюю систему пошуку зображень на основі вмісту. У мене 20 зображень 5 тварин. Так загалом 100 зображень. Моя система повертає 10 найбільш релевантних зображень до вхідного зображення. Тепер мені потрібно оцінити працездатність моєї системи за допомогою кривої Precision-Recall. Однак я не розумію …

12 data-mining  matlab  precision-recall  curves  computer-vision 

Цікаво, яке власне значення використання гармонічного середнього (наприклад, для обчислення F-мір) на відміну від зваженого середнього арифметичного при поєднанні точності та згадування? Я думаю, що середньозважене середнє арифметичне може зіграти роль гармонійного середнього, чи я щось пропускаю?

12 machine-learning  monte-carlo  precision-recall  harmonic-mean 

Чи можливо зробити тест на значущість виключно на балах точності / відкликання / F1? Наприклад, якщо ви зіткнулися з двома системами в документі, про який повідомляється лише P / R / F1 (на одному і тому ж наборі даних тощо), чи можете ви потім провести тест на статистичну значимість? Якщо …

12 statistical-significance  precision-recall 

Predicted class Cat Dog Rabbit Actual class Cat 5 3 0 Dog 2 3 1 Rabbit 0 2 11 Як я можу обчислити точність і згадати, щоб стало легко обчислити F1-бал. Нормальна матриця плутанини - це розмірність 2 х 2. Однак, коли це стає 3 х 3, я не знаю, …

12 machine-learning  precision-recall 

Я здійснив класифікацію, використовуючи декілька класифікаторів для даних, позначених двома класами, і використовував 5-кратну перехресну перевірку. На кожну складку я обчислював tp, tn, fp і fn. Тоді я підрахував точність, точність, відкликання та F-бал для кожного тесту. Моє запитання полягає в тому, що, коли я хочу оцінити результати, я взяв …

11 classification  cross-validation  precision-recall 

Чи існує якийсь стандартний метод визначення "оптимальної" точки роботи на кривій точності відкликання ? (тобто визначення точки на кривій, яка пропонує хороший компроміс між точністю та відкликанням) Дякую

11 machine-learning  precision-recall