Статистика та великі дані

Я аналізую соціальні мережі (не віртуальні) і спостерігаю за зв’язками між людьми. Якщо людина обрала б іншу людину, з якою зв'язатись випадковим чином, кількість з'єднань у групі людей розподілятиметься нормально - принаймні відповідно до книги, яку я зараз читаю. Як ми можемо знати, що розподіл гауссовий (нормальний)? Існують і інші …

14 distributions  networks  central-limit-theorem 

У мене два часові ряди S, і Т. вони мають однакову частоту і однакову довжину. Я хотів би обчислити (використовуючи R), кореляцію між цією парою (тобто S і T), а також мати можливість обчислити значення кореляції), тому я можу визначити, чи відповідає кореляція випадковістю чи ні. Я хотів би зробити …

14 r  time-series  correlation 

Я почав займатися Монте-Карло в R як хобі, але врешті-решт фінансовий аналітик порадив переїхати до Матлаба. Я досвідчений розробник програмного забезпечення. але новачок в Монте-Карло. Я хочу побудувати статичні моделі з аналізом чутливості, пізніші динамічні моделі. Потрібні хороші бібліотеки / алгоритми, які мене керують. Мені здається, що R має чудові …

14 r  matlab  monte-carlo 

Прочитавши один із "порад щодо досліджень" Р. Дж. Хайндмана про перехресну перевірку та часові ряди, я повернувся до старого мого питання, яке я спробую сформулювати тут. Ідея полягає в тому, що при проблемах класифікації чи регресії впорядкування даних не має важливого значення, і, отже, може бути використана k- кратна перехресна …

14 time-series  machine-learning  cross-validation 

Я будую додаток для android, яке записує дані акселерометра під час сну, щоб аналізувати тенденції сну та необов'язково будити користувача протягом бажаного часу під час легкого сну. Я вже створив компонент, який збирає та зберігає дані, а також сигнал тривоги. Мені все-таки потрібно боротися зі звітом, що відображає та зберігає …

14 time-series  smoothing  signal-processing  java 

Я шукаю відповідну теоретичну основу чи спеціальність, яка допоможе мені зрозуміти, як боротися з помилками, які має система GPS - особливо при роботі з маршрутами. По суті, я шукаю вимоги до даних та будь-яких алгоритмів, які можна використовувати, щоб мати змогу встановити довжину сліду. Відповідь має бути достовірною. Мій друг …

14 error  sampling 

Додавання, віднімання, множення та ділення нормальних випадкових величин чітко визначено, але як бути з тригонометричними операціями? Наприклад, припустимо, що я намагаюся знайти кут трикутного клина (моделюється як прямокутний трикутник) з двома катетами, що мають розміри d1d1d_1 і d2d2d_2 , обидва описані як звичайні розподіли. І інтуїція, і симуляція говорять мені, …

14 distributions  normal-distribution  circular-statistics  saddlepoint-approximation 

Коли ви той, хто виконує роботу, усвідомлюючи, що ви робите, ви розвиваєте почуття, коли ви переоцінили модель. З одного боку, ви можете відстежувати тенденцію або погіршення в регульованій площі R моделі. Можна також відслідковувати подібне погіршення p-значень коефіцієнтів регресії основних змінних. Але, коли ви просто читаєте, що хтось інший вивчає, …

14 regression  multivariate-analysis  overfitting 

Заблокований . Це запитання та його відповіді заблоковано, оскільки це питання поза темою, але має історичне значення. Наразі не приймає нових відповідей чи взаємодій. Вікова піраміда виглядає приблизно так: я хотів би зробити щось подібне, а саме 2 барплоти (не гістограми) з однаковими категоріями, повернуті вертикально і поширюючись на обидві …

14 r  data-visualization 

Колега в моєму кабінеті сьогодні сказав мені: "Деревові моделі не гарні, тому що вони потрапляють під екстремальні спостереження". Пошук тут призвів до цієї теми, яка в основному підтримує заяву. Що призводить мене до питання - за якої ситуації модель CART може бути надійною, і як це показано?

14 regression  classification  robust  cart 

Я застосовую алгоритм випадкового лісу як класифікатор до набору даних мікромасив, які розділені на дві відомі групи з 1000-ма функціями. Після початкового запуску я переглядаю важливість функцій і знову запускаю алгоритм дерева з 5, 10 та 20 найважливішими функціями. Я вважаю, що для всіх функцій, топ-10 та 20, показник помилок …

14 r  machine-learning  classification  random-forest 

Я шукаю Rпакет для оцінки коефіцієнтів Logit моделей з індивідуальним фіксованим ефектом (індивідуальним перехопленням), використовуючи оцінник Chamberlain 1980 року. Він часто відомий як оцінювач logit фіксованого ефекту Чемберлена. Це класичний оцінювач при роботі з даними бінарних підсумкових результатів (принаймні, в економетрії), але я просто не знаходжу в CRAN нічого пов'язаного …

14 r  logistic  panel-data  clogit 

Чи існує така модель моделювання, як LOESS, яка допускає нульовий, один або більше розривів, коли терміни розривів не відомі априорі? Якщо методика існує, чи існує реалізація в R?

14 r  regression  curve-fitting  change-point  loess 

Оскільки людині, яка потребує статистичних знань, але не є офіційно підготовленим статистиком, мені буде корисно скласти блок-схему (або якесь дерево рішень), щоб допомогти мені вибрати правильний підхід для вирішення певної проблеми (наприклад, "чи ти? знадобиться це і знайте, що і це, і вважайте дані нормально розподіленими? Використовуйте техніку X. Якщо …

14 hypothesis-testing  data-mining  eda 

Я переглядав цю сторінкуі помітили методи довірчих інтервалів lme та lmer в R. Для тих, хто не знає R, це функції для генерації змішаних ефектів або багаторівневих моделей. Якщо я маю фіксовані ефекти в чомусь на зразок повторного проектування заходів, що означає довірчий інтервал навколо прогнозованого значення (подібного до середнього)? …

14 r  confidence-interval  mixed-model  repeated-measures  sas