Хороша література про перехресну перевірку

10

Хтось знає хорошу книгу / веб-сторінку, щоб почати вивчати методи перехресної перевірки?

references cross-validation

— MarkDollar
джерело

2

На цьому веб-сайті є чудова інформація.

Зокрема, четвертий розділ цього PDF - це те, що ви шукаєте

— Пітер К.
джерело

5

Якщо для перебору моделі / особливостей потрібно використовувати перехресну перевірку, варто мати на увазі, що можна переоцінити статистику перехресної перевірки і в кінцевому підсумку встановити модель, яка працює погано, та оптимізовану статистику перехресної перевірки може бути суворо оптимістичною оцінкою ефективності. Ефекти цього можуть бути напрочуд великими. Для прикладу цього див. Амбруаз та Маклахлан у налаштуваннях вибору функцій та Каулі та Талбот для прикладу вибору моделі.

— Дікран Марсупіал
джерело

Це добре згадати, але слід подвійно сказати, що це приклади неправильного використання або перекручування резюме, а не деякі недоліки самого методу.

1

Дійсно, однак це спосіб, який досить часто зловживають - тому важливо бути обізнаним, дізнавшись про перехресну перевірку! Більше крос-валідація часто є хорошим рішенням, тобто вкладеною перехресною валідацією, або, як Стоун ставить це "подвійне перехресне" підтвердження. Проблема значною мірою впливає на будь-який критерій вибору функції або моделі, оптимізований для отримання моделі; немає нічого особливого в перехресній валідації в цьому сенсі.

— Дікран Марсупіал

0

Я також порекомендував би перехресну перевірку Payam Refaeilzadeh, Lei Tang та Huan Liu.

— Пітер К.
джерело