Статистика та великі дані

Ми іноді використовуємо графік спектральної щільності для аналізу періодичності у часових рядах. Зазвичай ми аналізуємо сюжет шляхом візуального огляду, а потім намагаємось зробити висновок про періодичність. Але чи розробив статистик будь-який тест, щоб перевірити, чи якісь шипи на ділянці статистично відрізняються від білого шуму? Чи розробили R-експерти який-небудь пакет для …

20 r  time-series  hypothesis-testing 

мігрували з math.stackexchange . Я обробляю довгий потік цілих чисел і розглядаю можливість відстеження декількох моментів, щоб можна було приблизно обчислити різні відсотки для потоку, не зберігаючи багато даних. Який найпростіший спосіб обчислити відсотки за кілька моментів. Чи є кращий підхід, який передбачає зберігання лише невеликої кількості даних?

20 algorithms  mathematical-statistics  moments 

Я провів просту лінійну регресію природного журналу з двох змінних, щоб визначити, чи співвідносяться вони. Мій вихід такий: R^2 = 0.0893 slope = 0.851 p < 0.001 Я збентежений. Дивлячись на значення , я б сказав, що дві змінні не співвідносяться, оскільки це так близько до . Однак нахил лінії …

20 regression  r-squared 

Я помітив, що ця проблема часто виникає в налаштуваннях статистичного консалтингу, і я хотів отримати ваші думки. Контекст Я часто розмовляю зі студентами-дослідниками, які провели дослідження приблизно так: Спостережне дослідження Розмір вибірки може становити 100, 200, 300 тощо. Було виміряно кілька психологічних шкал (наприклад, тривожність, депресія, особистість, ставлення, інші клінічні …

20 scales  causality  sem  observational-study 

Я намагаюся скласти пакет обміну даними для сайтів StackExchange, і зокрема, я застряг у спробі визначити "найцікавіші" питання. Я хотів би скористатися оцінкою запитань, але усунути упередження через кількість переглядів, але я не знаю, як до цього жорстко підійти. В ідеальному світі я міг би сортувати питання шляхом обчислення , …

20 data-mining  predictive-models 

Я запустив багаточленну модель Logit у JMP і отримав результати, які включали AIC, а також значення c-квадрата p для кожної оцінки параметрів. Модель має один категоричний результат та 7 категоричних пояснювальних варіантів. Потім я підходив до того, що, як я думав, створив би ту саму модель в R, використовуючи multinomфункцію …

20 r  logistic  multinomial  logit  jmp 

Чи існує (сильніша?) Альтернатива трансформації кореня квадратного дугу для даних про відсотки / пропорції? У наборі даних, над яким я працюю на даний момент, позначена гетеросцедастичність залишається після того, як я застосую цю трансформацію, тобто графік залишків та встановлених значень все ще є дуже ромбоїдним. Відредаговано для відповіді на коментарі: …

20 data-transformation  generalized-linear-model  heteroscedasticity 

Сезонне коригування є важливим кроком попередньої обробки даних для подальшого дослідження. Однак у дослідника є ряд варіантів сезонного розкладання тренд-циклу. Найпоширенішими (судячи з кількості цитат в емпіричній літературі) конкуруючими сезонними методами декомпозиції є X-11 (12) -ARIMA, Tramo / Seats (обидва реалізовані в Demetra + ) та ' stl . Прагнучи …

20 time-series  data-transformation  methodology  seasonality 

У мене виникають труднощі з розумінням основної логіки при встановленні нульової гіпотези . У цій відповіді очевидно загальновизнане твердження зазначається, що нульова гіпотеза - це гіпотеза, що ефекту не буде, все залишається те саме, тобто нічого нового під сонцем, так би мовити. Альтернативна гіпотеза - це те, що ви намагаєтесь …

20 hypothesis-testing  philosophical 

З огляду на наступну ієрархічну модель, і, де є нормальним розподілом. Чи є спосіб отримати точний вираз для інформації Фішера граничного розподілу наведеного c . Тобто, яка інформація про Фішера: p (x | c) = \ int p (x | \ mu) p (\ mu | c) d \ mu …

20 multilevel-analysis  information  fisher-information 

Скажімо, я перевіряю, наскільки змінна Yзалежить від змінної Xв різних експериментальних умовах і отримую такий графік: Штрихові лінії на графіку вище представляють лінійну регресію для кожної серії даних (експериментальна установка), а цифри в легенді позначають співвідношення Пірсона кожного ряду даних. Я хотів би обчислити "середню кореляцію" (або "середню кореляцію") між …

20 regression  correlation  mean  average 

Я маю на увазі цю статтю: http://www.nytimes.com/2011/01/11/science/11esp.html Розглянемо наступний експеримент. Припустимо, було підстави вважати, що монета була трохи зваженою до голови. Під час випробування монета піднімає голови 527 разів із 1000. Це вагомі докази того, що монета зважена? Класичний аналіз говорить так. При справедливій монеті шанси отримати 527 і більше …

20 hypothesis-testing  bayesian  statistics-in-media 

Заблокований . Це питання та його відповіді заблоковано, оскільки це питання поза темою, але має історичне значення. Наразі не приймає нових відповідей чи взаємодій. У Python matplotlib є команда boxplot . Зазвичай всі частини графіка проставляються цифрами. Як я можу змінити галочки на імена замість позицій? Для ілюстрації я маю …

20 python  matplotlib 

Скажімо, у нас є два фактори (A і B), кожен з яких має два рівні (A1, A2 і B1, B2) і змінну відповіді (y). При виконанні двостороннього типу ANOVA: y~A+B+A*B Ми перевіряємо три нульові гіпотези: Різниця серед засобів фактора А немає Немає різниці в засобах фактору В Немає взаємодії між …

20 hypothesis-testing  anova 

Мені цікаво вивчити (і реалізувати) альтернативу поліноміальній інтерполяції. Однак у мене виникають проблеми з пошуком хорошого опису того, як ці методи працюють, як вони співвідносяться та як їх порівнюють. Буду вдячний за ваш внесок щодо плюсів / мінусів / умов, за яких ці методи чи альтернативи були б корисними, але …

20 interpolation  splines