Статистика та великі дані

Ми створюємо діаграму, що показує трафік за часом доби протягом певного періоду. Таким чином, вісь y - це рух, вісь x - півночі, 1 ранок, 2 ранку тощо. Це також можуть бути дні тижня. Яка загальна назва для цього типу діаграм? Я придумав "циклічну діаграму". Це стандарт? Чи є такий? …

9 time-series  data-visualization 

У Rможна виконати тест Бреуша-язичницький для гетероскедастичності з допомогою ncvTestфункції carпакета. Тест Бройша-Язичника - це тест чи-квадратного тесту. Як інтерпретувати ці результати: > require(car) > set.seed(100) > x1 = runif(100, -1, 1) > x2 = runif(100, -1, 1) > ncvTest(lm(x1 ~ x2)) Non-constant Variance Score Test Variance formula: ~ fitted.values …

9 interpretation  heteroscedasticity 

Я треную штучну нейронну мережу (зворотне розповсюдження, подача вперед) з не нормальними розподіленими даними. Окрім помилки середнього середнього квадрату, література часто пропонує коефіцієнт кореляції Пірсона для оцінки якості тренованої сітки. Але чи розумний коефіцієнт кореляції Пірсона, якщо дані про навчання не розподіляються нормально? Чи не було б більш розумним використовувати …

9 correlation  neural-networks  spearman-rho 

У когось є пропозиції чи пакети, які підрахують коефіцієнт часткового визначення? Коефіцієнт часткового визначення може бути визначений як відсоток варіації, який неможливо пояснити у зменшеній моделі, але може бути пояснений предикторами, зазначеними в повній (ер) моделі. Цей коефіцієнт використовується для розуміння того, чи може бути корисним один чи більше додаткових …

9 r  regression  anova 

Деякі зміни внесені ... Це питання просто для задоволення, тому якщо це не весело, будь ласка, ігноруйте його. Я вже отримую велику допомогу від цього сайту, тому не хочу кусати руку, яка мене годує. Він ґрунтується на прикладі реального життя, і це просто щось, про що я багато роздумував. Я …

9 probability  estimation  sampling 

Я проглядав Google і цей сайт, і я все ще плутаю функцію lmer у бібліотеці lme4. У мене є деякі дані, зібрані з різних психіатричних відділень, які мають багаторівневу структуру. Для спрощення я виберу дві змінні рівня 2 та дві рівня 1, хоча насправді є ще кілька. Рівень 2 - …

9 r  mixed-model  lme4-nlme 

Які методи мінімізації ефекту меж при вейвлетському розкладі? Я використовую R і пакет хвилеподібно . Я знайшов, наприклад, функцію ?brick.wall але Я не надто використовую, як ним користуватися. Я не впевнений, що найкраще рішення - зняти якийсь коефіцієнт. Я десь читав, що існує кілька вейвлетів, які не скрізь однакові, і …

9 r  signal-processing  wavelet 

Чи є пакет R, веб-сайт чи команда, які дозволять шукати певну статистичну процедуру, яку вони бажають? Наприклад, якщо я хотів знайти пакет, який мав трансформацію Box-Cox, веб-сайт / пакет / команда може повернути "MASS" і направити мене на boxcox()функцію. Це досить просто з чимось на кшталт Box-Cox, але я сподівався, …

9 r 

Я робив якісь випадкові інтернет-дослідження щодо бікластерів. (Я прочитав статтю Вікі кілька разів.) Поки здається, ніби мало визначень чи стандартної термінології. Мені було цікаво, чи є якісь стандартні папери чи книги, які кожен, хто цікавиться алгоритмами пошуку бікластерів, повинен прочитати. Чи можна сказати, що таке сучасний стан у цій галузі? …

9 clustering  data-mining 

Чи є офіційний статистичний тест для перевірки, чи є процес білим шумом?

9 time-series  white-noise 

У R є функція nlm (), яка здійснює мінімізацію функції f за допомогою алгоритму Ньютона-Рафсона. Зокрема, ця функція виводить значення змінного коду, визначеного таким чином: кодуйте ціле число, вказуючи, чому процес оптимізації припинився. 1: відносний градієнт близький до нуля, ітераційний струм, ймовірно, є рішенням. 2: послідовні ітерації в межах толерантності, …

9 r  minimum 

Мені прийшов пост " Пост-пара-паральні порівняння двостороннього ANOVA " (відповідаючи на це повідомлення ), де показано наступне: dataTwoWayComparisons <- read.csv("http://www.dailyi.org/blogFiles/RTutorialSeries/dataset_ANOVA_TwoWayComparisons.csv") model1 <- aov(StressReduction~Treatment+Age, data =dataTwoWayComparisons) summary(model1) # Treatment is signif pairwise.t.test(dataTwoWayComparisons$StressReduction, dataTwoWayComparisons$Treatment, p.adj = "none") # no signif pair TukeyHSD(model1, "Treatment") # mental-medical is the signif pair. (Вихід додається внизу) …

9 r  multiple-comparisons  t-test  post-hoc  tukey-hsd 

У мене є файл CSV з 4 мільйонами країв спрямованої мережі, яка представляє людей, що спілкуються один з одним (наприклад, Джон надсилає повідомлення Марії, Мері надсилає повідомлення Енн, Джон надсилає ще одне повідомлення Марії тощо). Я хотів би зробити дві речі: Знайдіть ступінь, приналежність та (можливо) міри центральності власного вектора …

9 r  data-visualization  networks 

У мене є матриця проектування регресорів p, n спостережень, і я намагаюся обчислити вибіркову дисперсійно-коваріаційну матрицю параметрів. Я намагаюся безпосередньо обчислити це за допомогою svd. Я використовую R, коли я беру svd проектної матриці, я отримую три компоненти: матрицю UUU який n × pn×pn \times p, матриця DDD який 1 …

9 r  regression 

Я намагаюся вирішити проблему для найменшого кутового регресу (ЛАР). Це проблема 3,23 на сторінці 97 з Гесте і ін., Елементи статистичного навчання, другий. ред. (5-та друкарня) . Розглянемо проблему регресії з усіма змінними та реакцією, що мають середнє нульове та стандартне відхилення. Припустимо також, що кожна змінна має однакову абсолютну …

9 regression  machine-learning  correlation  self-study