Запитання з тегом «model-selection»

Вибір моделі - це проблема визначити, яка модель з якогось набору працює найкраще. Популярні методи включають критерії , AIC та BIC, тестові набори та перехресну перевірку. В якійсь мірі вибір функції є підпроблемою вибору моделі. R2

1
Гамма-GLM, пов’язана з логіном, проти гауссова GLM, пов'язана з журналом, і LM-трансформована логіка
З моїх результатів виходить, що GLM Gamma відповідає більшості припущень, але чи варто вдосконалення щодо LM-трансформованого LM? Більшість літератури я знайшов угоди з пуассонськими або біноміальними GLM. Стаття ОЦІНКА УЗАГАЛЬНЕНОЇ ЛІНІЙНОЇ МОДЕЛЬНОЇ МОДЕЛІ, ВИКОРИСТОВУЮЧИМ РАНДОМІЗАЦІЮ, дуже корисна, але в ній відсутні фактичні сюжети, які використовуються для прийняття рішення. Сподіваюся, хтось …

1
Чи можете ви порівняти значення AIC до тих пір, поки моделі базуються на одному і тому ж наборі даних?
Я роблю деякі прогнози в R, використовуючи пакет прогнозу Роб Хандман . Папір, що належить до упаковки, можна знайти тут . У роботі, після пояснення алгоритмів автоматичного прогнозування, автори реалізують алгоритми на тому ж наборі даних. Однак, оцінивши як експоненціальне згладжування, так і модель ARIMA, вони роблять заяву, яку я …

1
Терміни взаємодій та поліноми вищого порядку
Якби мені було цікаво пристосовувати двосторонні взаємодії між лінійною пояснювальною змінною та іншою пояснювальною змінною яка має квадратичний зв'язок із залежною змінною , я повинен би включати як взаємодію з квадратичною складовою, так і взаємодію з лінійною компонент в моделі? Напр .: У свою чергу будуючи на моїй попередній темі: …

2
Чи можливо, що AIC та BIC дають абсолютно різні вибірки?
Я виконую модель регресії Пуассона з 1 змінною відгуку та 6 коваріатами. Вибір моделі з використанням AIC призводить до моделі з усіма коваріатами, а також 6 термінами взаємодії. Однак BIC приводить до моделі, що має лише 2 коваріати та відсутні умови взаємодії. Чи можливо, що два критерії, які дуже схожі, …

1
Варіабельний вибір та вибір моделі
Тож я розумію, що вибір змінних є частиною вибору моделі. Але з чого саме складається вибір моделі? Це більше ніж наступне: 1) виберіть дистрибутив для вашої моделі 2) вибрати пояснювальні змінні,? Я запитую це, тому що я читаю статтю Burnham & Anderson: AIC vs BIC, де вони говорять про AIC …

1
Коли я повинен турбуватися про парадокс Джеффріс-Ліндлі у виборі моделі Байесія?
Я розглядаю великий (але кінцевий) простір моделей різної складності, які я досліджую за допомогою RJMCMC . Попередній вектор параметрів для кожної моделі є досить інформативним. У яких випадках (якщо такі є) я повинен турбуватися через парадокс Джеффріс-Ліндлі, який надає перевагу більш простим моделям, коли одна з більш складних моделей буде …

1
Яка різниця між "тестуванням гіпотез" та "вибором моделі"?
У літературі обидва терміни часто вживаються синонімічно або переплітаються. Зараз я намагаюся знайти чітке розмежування обох термінів. З моєї точки зору, гіпотеза зазвичай виражається за допомогою моделі. Тож навіть якщо ми перевіряємо гіпотезу нуля проти альтернативи, з моєї точки зору ми робимо вибір моделі. Чи може хтось дати мені інтуїтивну …

3
Байезіан проти MLE, проблема, що відповідає
У PRML-книзі Бішопа він говорить, що надмірне оснащення - це проблема з максимальною оцінкою ймовірності (MLE), і Байєсій може цього уникнути. Але я думаю, що перевиконання - це проблема більше не щодо вибору моделі, а не щодо методу оцінки параметрів. Тобто, припустимо, у мене є набір даних , який генерується …

1
AIC для вкладених моделей: нормалізація константа
AIC визначається як , де - оцінювач максимальної ймовірності, а - розмірність простору параметрів. Для оцінки зазвичай нехтують постійним коефіцієнтом щільності. Це фактор, який не залежить від параметрів, щоб спростити ймовірність. З іншого боку, цей фактор є дуже важливим для розрахунку АПК, враховуючи, що при порівнянні невкладених моделей цей коефіцієнт …

4
Вибір моделі PCA за допомогою AIC (або BIC)
Я хочу використати інформаційний критерій Akaike (AIC), щоб вибрати відповідну кількість факторів для вилучення в PCA. Єдине питання полягає в тому, що я не впевнений, як визначити кількість параметрів. Розглянемо матрицю , де представляє кількість змінних, а кількість спостережень, таких що . Оскільки матриця коваріації симетрична, то при максимальній оцінці …

1
Відмінності між PROC змішаними та lme / lmer у R - ступенями свободи
Примітка: це запитання є репостом, оскільки моє попереднє питання довелося видалити з юридичних причин. Порівнюючи PROC MIXED від SAS з функцією lmeз nlmeпакету в R, я натрапив на деякі досить заплутані відмінності. Більш конкретно, ступеня свободи в різних випробувань відрізняються між PROC MIXEDі lme, і я задавався питанням, чому. Почніть …
12 r  mixed-model  sas  degrees-of-freedom  pdf  unbiased-estimator  distance-functions  functional-data-analysis  hellinger  time-series  outliers  c++  relative-risk  absolute-risk  rare-events  regression  t-test  multiple-regression  survival  teaching  multiple-regression  regression  self-study  t-distribution  machine-learning  recommender-system  self-study  binomial  standard-deviation  data-visualization  r  predictive-models  pearson-r  spearman-rho  r  regression  modeling  r  categorical-data  data-visualization  ggplot2  many-categories  machine-learning  cross-validation  weka  microarray  variance  sampling  monte-carlo  regression  cross-validation  model-selection  feature-selection  elastic-net  distance-functions  information-theory  r  regression  mixed-model  random-effects-model  fixed-effects-model  dataset  data-mining 

2
Як використовувати аналіз основних компонентів для вибору змінних для регресії?
В даний час я використовую аналіз основних компонентів для вибору змінних, які використовуватимуться при моделюванні. На даний момент я роблю вимірювання A, B і C у своїх експериментах. Що я дійсно хочу знати: чи можу я зробити менше вимірювань і припинити запис C і або B, щоб заощадити час і …

1
Тестова еквівалентність вкладених моделей
Скажімо, - лінійна функція і манекен . Моя гіпотеза полягає в тому, що само по собі , як гедоністичні індексу вектора інших змінних, . У мене є підтримка цього в з (тобто , , ..., ) на . Чи є можливість перевірити еквівалентність цих двох моделей:ууyххxггdггdZZZМА НО VАМАNОVАMANOVAZZZz1z1z_1z2z2z_2zнzнz_nггd Модель 1:у= …

2
GLM після вибору моделі або регуляризації
Я б хотів поставити це питання у двох частинах. Обидва стосуються узагальненої лінійної моделі, але перша стосується вибору моделі, а друга стосується регуляризації. Передумови: я використовую GLM (лінійні, логістичні, гамма-регресії) моделі як для прогнозування, так і для опису. Коли я маю на увазі " нормальні речі, що робиться з регресією …

1
Точний тест Фішера та гіпергеометричне поширення
Я хотів краще зрозуміти точний тест Фішера, тому я розробив наступний іграшковий приклад, де f і m відповідає чоловічому та жіночому, а n і y відповідає такому "споживання соди", як це: > soda_gender f m n 0 5 y 5 0 Очевидно, це різке спрощення, але я не хотів, щоб …

Використовуючи наш веб-сайт, ви визнаєте, що прочитали та зрозуміли наші Політику щодо файлів cookie та Політику конфіденційності.
Licensed under cc by-sa 3.0 with attribution required.