Статистика та великі дані

Я намагаюся встановити сплайн для GLM за допомогою R. Після того, як я підганяю сплайн, я хочу мати змогу взяти отриману модель і створити файл моделювання в робочій книжці Excel. Наприклад, скажімо, у мене є набір даних, де y - випадкова функція x, а нахил різко змінюється в певній точці …

20 splines 

Розгляньте правоцензуровані спостереження з подіями в часи . Кількість сприйнятливих особин за разт1, т2, …т1,т2,…t_1, t_2, \dots це п я , а число подій в момент часу я є d I .iiiнiнin_iiiiгiгid_i Каплан-Мейєр або оцінювач продукту виникає природно як MLE, коли функцією виживання є ступінчаста функція . Правдоподібності , то …

20 bayesian  survival  kaplan-meier 

З усіма медіа-розмовами про глибоке вивчення цих днів я прочитав деякі елементарні речі про це. Щойно я виявив, що це просто ще один метод машинного навчання для вивчення шаблонів з даних. Але моє запитання: де і чому цей метод світить? Чому всі говорять про це саме зараз? Тобто в чому …

20 machine-learning  data-mining  deep-learning  deep-belief-networks 

Привіт, я намагаюся знайти непараметричний еквівалент двосторонньої ANOVA (3x4 конструкції), яка здатна включати взаємодії. З мого читання в Зарі 1984 р. "Біостатистичного аналізу" це можливо за допомогою методу, викладеного в Шірера, Рея і Зайця (1976), однак, згідно з іншими публікаціями в Інтернеті, було зроблено висновок, що цей метод більше не …

20 r  anova  nonparametric  stata  interaction 

Для цієї одновимірної лінійної регресійної моделі yi=β0+β1xi+ϵiyi=β0+β1xi+ϵiy_i = \beta_0 + \beta_1x_i+\epsilon_i задано набір даних , оцінки коефіцієнтів Ось моє запитання відповідно до книги та Вікіпедії , стандартна помилка є Як і чому?β 1 = Σ я х я у я - п ˉ х ˉ уD={(x1,y1),...,(xn,yn)}D={(x1,y1),...,(xn,yn)}D=\{(x_1,y_1),...,(x_n,y_n)\} β 0= ˉ у …

20 standard-error  inference 

Я взяв зразок з яти точок даних у популяції. Кожен з цих пунктів має справжнє значення (відоме з основної істини) та оцінене значення. Потім я обчислюю помилку для кожної вибіркової точки і потім обчислюю RMSE вибірки.ннn Як я можу тоді зробити певний інтервал довіри навколо цього RMSE, виходячи з розміру …

20 confidence-interval 

Я шукаю класифікаторів, які виводять ймовірності того, що приклади належать до одного з двох класів. Я знаю логістичну регресію та наївний Байєс, але чи можете ви сказати мені про інших, які працюють аналогічно? Тобто класифікатори, які передбачають не класи, до яких належать приклади, а ймовірність того, що приклади підходять до …

20 machine-learning  probability  logistic  classification  naive-bayes 

Чи переробка багатовимірної лінійної регресійної моделі як множинної лінійної регресії цілком еквівалентна? Я не маю на увазі просто запуск ttt окремих регресій. Я читав це в декількох місцях (Байєсівський аналіз даних - Гельман та ін., І багатоваріантна стара школа - Марден), що багатоваріантну лінійну модель можна легко перемацати як багаторазову …

20 regression  multiple-regression  linear-model  multivariate-regression 

Мені було цікаво, чи хтось знає, чи існує застосування в статистиці, в якому замість слабкої послідовності потрібна сильна послідовність оцінки. Тобто, сильна узгодженість є важливою для заявки, і додаток не працюватиме зі слабкою послідовністю.

20 hypothesis-testing  theory  asymptotics  estimators  consistency 

Я вивчаю R і експериментував з дисперсійним аналізом. Я керував обома kruskal.test(depVar ~ indepVar, data=df) і anova(lm(depVar ~ indepVar, data=dF)) Чи є практична різниця між цими двома тестами? Я розумію, що вони обидва оцінюють нульову гіпотезу про те, що популяції мають однакове значення.

20 r  anova  kruskal-wallis 

Я читав у кількох місцях, що обчислення середньої порядкової величини недоцільно. Я намагаюся зрозуміти, чому це може бути недоречно. Я думаю, що це тому, що, як правило, порядкова змінна нормально не розподіляється, і тому обчислення середнього дасть неточне представлення. Чи може хтось дати більш детальні міркування, чому обчислення середньої порядкової …

20 mean  ordinal-data 

Статистична математика чи ні? Зважаючи на те, що це всі цифри, здебільшого викладають математичні кафедри, і ви отримуєте математичні заліки за це, мені цікаво, чи просто люди це мають на увазі, як вони говорять про це, напівжартома, як, мовляв, це незначна частина математики чи просто застосовувана математика. Цікаво, чи можна …

20 mathematical-statistics  philosophical 

Я намагаюся розібратися, що означає багатозначне припущення в навчанні, яке знаходиться під наглядом. Чи може хтось пояснити простим способом? Я не можу за цим зрозуміти інтуїцію. Це говорить про те, що ваші дані лежать на низькомірному колекторі, вбудованому у простор більш високого розміру. Я не зрозумів, що це означає.

20 machine-learning  unsupervised-learning  supervised-learning  manifold-learning 

Я тестую різні класифікатори на наборі даних, де є 5 класів, і кожен екземпляр може належати до одного або декількох із цих класів, тому конкретно використовую багатозначні класифікатори scikit-learn sklearn.multiclass.OneVsRestClassifier. Тепер я хочу виконати перехресну перевірку за допомогою sklearn.cross_validation.StratifiedKFold. Це спричиняє таку помилку: Traceback (most recent call last): File "mlfromcsv.py", …

20 cross-validation  python  multi-class  scikit-learn  multilabel 

У мене є випадкова величина де a нормально розподілений . Що я можу сказати про та ? Наближення також буде корисним.N ( μ , σ 2 ) E ( X ) V a r ( X )Х( a ) = журнал( а )X(a)=log⁡(a)X(a) = \log(a)N( μ , σ2)N(μ,σ2)\mathcal N(\mu,\sigma^2)Е( X)E(X)E(X)Va …

20 normal-distribution  mathematical-statistics  random-variable  lognormal  logarithm