Укладання / складання моделей з каре

Я часто ловлю себе на навчання кілька різних моделей прогнозування з використанням caretв Р. я буду навчати їх все на один і ту ж поперечних складках перевірки, з допомогою caret::: createFolds, а потім вибрати кращу модель , засновану на перехресній перевірці помилок.

Однак середній прогноз декількох моделей часто перевершує найкращу одиничну модель на незалежному тестовому наборі. Я думаю про створення деяких функцій для складання / складання каретних моделей, які навчалися з однаковими складками перехресної перевірки, наприклад, беручи середні прогнози для кожної моделі на кожну складку, або тренуючи "мета-модель".

Звичайно, для цього може знадобитися зовнішній цикл перехресної перевірки. Хтось знає про будь-які існуючі пакети / відкритий код для складання моделей карет (і, можливо, перехресну перевірку цих ансамблів)?

Схоже, Макс Кун насправді почав працювати над пакетом для складання моделей карет , але ще не встиг його закінчити. Це саме те, що я шукав. Я сподіваюся, що проект буде закінчений одного дня!

редагувати: Я написав власний пакет для цього: caretEnsemble

Те, що ви шукаєте, називається "складання моделі". Простий вступний посібник з кодом R можна знайти тут: http://viksalgorithms.blogspot.jp/2012/01/intro-to-ensemble-learning-in-r.html

Я не зовсім впевнений, що ви шукаєте, але це може допомогти: http://www.jstatsoft.org/v28/i05/paper

Це як використовувати кілька моделей у кареті. Частина, яка може вас зацікавити - це розділ 5 на сторінці. 13.