Статистика та великі дані

Я почав вивчати звичайні оцінки найменших квадратів (OLS) і все ще на самому початку. Я вже придбав кілька книг з економетрики, але в Інтернеті нічого не знайшов. Тому мені було цікаво, чи існує веб-сайт, домашня сторінка чи інші інтернет-ресурси, які пояснюють найменш оцінювачі квадратів. Я шукаю матеріал, який дає загальний …

11 references  least-squares 

Ідея, що стоїть за періодичною нейронною мережею (RNN), мені зрозуміла. Я розумію це таким чином: У нас є послідовність спостережень ( о⃗ 1, о⃗ 2, … , О⃗ нo→1,o→2,…,o→n\vec o_1, \vec o_2, \dots, \vec o_n ) (або, іншими словами, багатоваріантний часовий ряд). Кожне окреме спостереження о⃗ io→i\vec o_i - NNN …

11 time-series  neural-networks  predictive-models  intuition  rnn 

Повне розкриття інформації: я не статистик, і не претендую на те, щоб бути його. Я низько ІТ-адміністратор. Будь ласка, пограй зі мною ніжно. :) Я відповідальний за збір та прогнозування використання дискового накопичувача для нашого підприємства. Ми збираємо щомісяця користування пам’яттю та використовуємо просту прогресивну лінійну регресію на дванадцять місяців …

11 regression  forecasting  adjustment 

Останнім часом мене зацікавило складання моделей як форми ансамблевого навчання. Зокрема, я трохи експериментував з деякими наборами даних про іграшки для проблем з регресією. Я в основному реалізував індивідуальні регресори "рівня 0", зберігав прогнози виходу кожного регресора як нову функцію для "метарегресора", який можна взяти за свій внесок, і прилаштував …

11 machine-learning  ensemble  stacking 

Я намагаюся вибрати один з цих двох тестів для аналізу парних даних. Хтось знає якісь правила, про які вибрати взагалі?

11 hypothesis-testing  nonparametric  paired-data  wilcoxon-signed-rank  sign-test 

Я намагаюся обернути голову навколо результату теореми Байєса, застосованого до прикладу класичної мамографії, при цьому поворот мамографії є ​​ідеальним. Це є, Захворюваність на рак:.01.01.01 Ймовірність позитивної мамографії, якщо пацієнт має рак:111 Ймовірність позитивної мамографії, якщо пацієнт не має раку:.01.01.01 Байєс: P (рак | мамограма +) =1⋅.01(1⋅.01)+(.091⋅.99)1⋅.01(1⋅.01)+(.091⋅.99)\dfrac {1 \cdot .01}{(1 \cdot …

11 bayesian  bayes  binning  diagnosis 

У різних джерелах (див., Наприклад, тут ) наведена наступна формула для довіреного інтервалу для медіани (особливо для того, щоб намалювати виїмки на графіках коробки та вуса): 95% CImedian=Median±1.57×IQRN−−√95% CImedian=Median±1.57×IQRN 95\%\ CI_{\rm median} = {\rm Median} \pm \frac{1.57\times IQR}{\sqrt{N}} Чарівна константа зводить мене з розуму, я не можу зрозуміти, як це …

11 confidence-interval  median  boxplot  interquartile 

Мої актуальні запитання є в останніх двох абзацах, але мотивувати їх: Якщо я намагаюся оцінити середнє значення випадкової величини, яка слід за нормальним розподілом з відомою дисперсією, я прочитав, що введення рівномірного до середнього результату призводить до заднього розподілу, пропорційного функції ймовірності. У цих ситуаціях достовірний інтервал Байєса ідеально перегукується …

11 bayesian  maximum-likelihood  posterior  frequentist 

Я говорю тут про матриці кореляцій Пірсона. Я часто чув, як це говорило, що всі кореляційні матриці повинні бути позитивними напівмісячними. Я розумію, що позитивні певні матриці повинні мати власні значення , тоді як позитивні напівфінітні матриці повинні мати власні значення ≥ 0 . Це змушує мене думати, що моє …

11 covariance-matrix  eigenvalues  correlation-matrix 

Здається, це дійсно високо, але це для мене контрсуєтивне. Може хтось, будь ласка, пояснить? Я дуже розгублений цим питанням і буду вдячний за детальне, проникливе пояснення. Заздалегідь дякую!

11 autocorrelation  random-walk 

Як карти активації на даному шарі підключені до фільтрів для цього шару? Я не запитую про те, як зробити згорнуту операцію між фільтром і картою активації, я запитую про тип підключення цих двох. Наприклад, скажіть, що ви хотіли зробити повний зв’язок. У вас є f кількість фільтрів і n кількість …

11 machine-learning  deep-learning  conv-neural-network 

Один з способів генерації вкладення слів є наступними ( дзеркало ): Отримайте корпорацію, наприклад, "Мені подобається літати. Мені подобається NLP. Мені подобається глибоке навчання". Побудуйте з нього матрицю потоку слова: Виконайте SVD на та збережіть перші стовпці U.XXXkkk Кожен рядок підматриці буде словом, що вбудовує слово, яке представляє рядок (рядок …

11 natural-language  svd  mutual-information  word-embeddings  language-models 

У мене є аналогічна проблема із заданим тут питанням: Як можна виміряти нерівномірність розподілу? У мене є набір розподілів ймовірностей по днях тижня. Я хочу виміряти, наскільки близький кожен розподіл до (1 / 7,1 / 7, ..., 1/7). На даний момент я використовую відповідь із зазначеного питання; L2-норма, яка має …

11 probability  distributions  random-variable  uniform  measurement 

Як можна обчислити кількість параметрів у штучній нейронній мережі, щоб обчислити її AIC?

11 neural-networks  aic 

Яка статистична відмінність між лінійною регресією в R із formulaвстановленим на y ~ x + 0замість y ~ x? Як я інтерпретую ці два різні результати?

11 multiple-regression  generalized-linear-model  intercept