Статистика та великі дані

Моделі дискримінантного аналізу Гаусса вивчають а потім застосовують правило Байєса для оцінки P ( y | x ) = P ( x | y ) P p r i o r ( y )П( х | у)П(х|у)P(x|y)Отже, це генеративні моделі. Чому тоді це називається дискримінантним аналізом? Якщо це відбувається тому, …

13 normal-distribution  discriminant-analysis  generative-models 

Хтось знає, чи описано наступне і (в будь-якому випадку), чи це звучить як правдоподібний метод вивчення прогнозної моделі з дуже незбалансованою цільовою змінною? Часто в CRM-програмах пошуку даних ми будемо шукати модель, коли позитивна подія (успіх) дуже рідкісна стосовно більшості (негативний клас). Наприклад, у мене може бути 500 000 випадків, …

13 data-mining  predictive-models 

Це питання мотивоване цим . Я шукав два джерела, і ось що я знайшов. A. van der Vaart, Асимптотична статистика: Вкрай рідко можливо вирахувати вірогідність профілю, але його чисельне оцінювання часто можливо. Тоді ймовірність профілю може слугувати для зменшення розмірності функції ймовірності. Функції правдоподібності профілю часто використовуються так само, як …

13 estimation  maximum-likelihood  likelihood  asymptotics  profile-likelihood 

У мене є такий результат регресії логістики: Coefficients: Estimate Std. Error z value Pr(>|z|) (Intercept) 0.5716 0.1734 3.297 0.000978 *** R1 -0.4662 0.2183 -2.136 0.032697 * R2 -0.5270 0.2590 -2.035 0.041898 * Чи доцільно повідомити про це наступним чином: Бета-коефіцієнт, коефіцієнт коефіцієнта, значення Zvalue, P. Якщо так, то як я …

13 logistic 

Припустимо, я виміряв деяку змінну у братів і сестер, які вкладені в сім'ї. Структура даних виглядає приблизно так: значення сімейного брата ------ ------- ----- 1 1 y_11 1 2 y_12 2 1 y_21 2 2 y_22 2 3 y_23 ... ... ... Я хочу знати співвідношення між вимірюваннями, проведеними на …

13 mixed-model  intraclass-correlation 

Я думаю, що я розумію, як працюють основи завантаження , але я не впевнений, що розумію, як я можу використовувати завантажувальний інструмент для вибору моделі або щоб уникнути зайвого набору. Для вибору моделі, наприклад, ви б просто обрали модель, яка дає найменшу помилку (можливо, дисперсію?) У всіх зразках завантажувальної програми? …

13 model-selection  cross-validation  bootstrap 

Я розумію, що коефіцієнт небезпеки з моделі пропорційної небезпеки Кокса порівнює вплив на ступінь небезпеки для даного фактору з еталонною групою. Як би ви повідомили про це аудиторії, яка не знає статистики? Спробуємо сформулювати приклад. Скажіть, ми зараховуємо людей до дослідження, скільки часу перед тим, як придбати диван. Ми правоцензуруємо …

13 survival  cox-model 

Я пройшов курс імовірностей в університеті кілька років тому, але зараз переживаю деякі алгоритми машинного навчання, і частина математики просто збивається з глузду. Зараз саме я вивчаю алгоритм ЕМ (максимізація очікування) і, здається, існує великий розрив між тим, що потрібно, і тим, що я маю. Я не прошу книги чи …

13 probability  machine-learning 

Використовуючи наступний код, я спробував намалювати чотири графіки на графіку в R. Я не задоволений фігурою, оскільки між ділянками є багато місця, тому ширина ділянок недостатня для аналізу ділянок. Може хтось допоможе мені скласти хороший графік, що має чотири сюжети? Як я можу зберігати мітки осі x від 1 до …

13 r  data-visualization 

Таблиця 18.1 в елементах статистичного навчання підсумовує ефективність декількох класифікаторів на наборі даних 14 класу. Я порівнюю новий алгоритм з мережею та еластичною сіткою для таких задач класифікації багатокласових. Використовуючи glmnetверсію 1.5.3 (R 2.13.0), я не в змозі відтворити точку 7. ( -окреслений мультином) в таблиці, де кількість використаних генів …

13 classification  lasso  glmnet 

Зачинено. Це питання поза темою . Наразі відповіді не приймаються. Хочете вдосконалити це питання? Оновіть питання, щоб воно було тематичним для перехресної перевірки. Закритий минулого року . Я стежу за курсом байєсівської статистики за допомогою BUGS та R. Тепер я вже знаю BUGS, це чудово, але я не дуже люблю …

13 r  bayesian  bugs 

У мене великий набір точок даних форми (середній, stdev). Я хочу звести це до одиничного (кращого) значення та (сподіваюся) меншого стандартного відхилення. Зрозуміло, що я міг просто обчислити , однак це не враховує той факт, що деякі точки даних є значно точнішими, ніж інші.∑datameanN∑datameanN\frac{\sum data_{mean}}{N} Простіше кажучи, я хочу заздалегідь …

13 normal-distribution  repeated-measures  weighted-mean 

Припустимо, у нас є два оцінювачі та для деякого параметра x . Щоб визначити, який оцінювач "кращий", ми подивимось на MSE (середня квадратична помилка)? Іншими словами, ми дивимось на MSE = \ beta ^ 2 + \ sigma ^ 2, де \ beta - зміщення оцінки, а \ sigma ^ …

13 estimation  mse 

Заблокований . Це запитання та його відповіді заблоковано, оскільки це питання поза темою, але має історичне значення. Наразі не приймає нових відповідей чи взаємодій. Я дуже новачок у R та в будь-яких пакунках у Р. Я переглянув документацію ggplot2, але не зміг її знайти. Я хочу поле поле змінної boxthisщодо …

13 r  boxplot  ggplot2 

У мене є таблиця з чотирма групами (4 групи ІМТ) як незалежна змінна (коефіцієнт). У мене залежна змінна величина - це "відсоток матері, що палить під час вагітності". Чи дозволено використовувати для цього ANOVA або мені потрібно використовувати хі-квадрат або якийсь інший тест?

13 anova