Запитання з тегом «variance»

У простій лінійній регресії маємо y=β0+β1x+uy=β0+β1x+uy = \beta_0 + \beta_1 x + u , де u∼iidN(0,σ2)u∼iidN(0,σ2)u \sim iid\;\mathcal N(0,\sigma^2) . Я отримав оцінювач: β1^=∑i(xi−x¯)(yi−y¯)∑i(xi−x¯)2 ,β1^=∑i(xi−x¯)(yi−y¯)∑i(xi−x¯)2 , \hat{\beta_1} = \frac{\sum_i (x_i - \bar{x})(y_i - \bar{y})}{\sum_i (x_i - \bar{x})^2}\ , деx¯x¯\bar{x} іy¯y¯\bar{y} - вибіркові засобиxxxіyyy. Тепер я хочу , щоб знайти дисперсію …

38 regression  mathematical-statistics  variance  linear-model  regression-coefficients 

TL, DR: Схоже, що, всупереч часто повторюваним порадам, перехресне підтвердження виходу-один-один (LOO-CV) - тобтократне CV з(кількість складок), що дорівнює(число навчальних спостережень) - дає оцінку похибки узагальнення, яка є найменшою змінною для будь-якого, не найбільш змінною, припускаючи певнуумову стабільності або моделі / алгоритму, набору даних, або обох (я не впевнений, який …

37 regression  machine-learning  variance  cross-validation  predictive-models 

Знаменник (неупередженого) оцінювача дисперсії дорівнює n−1n−1n-1 оскільки є nnn спостережень і оцінюється лише один параметр. V(X)=∑ni=1(Xi−X¯¯¯¯)2n−1V(X)=∑i=1n(Xi−X¯)2n−1 \mathbb{V}\left(X\right)=\frac{\sum_{i=1}^{n}\left(X_{i}-\overline{X}\right)^{2}}{n-1} Тим самим я дивуюсь, чому не повинен знаменник коваріації бути n−2n−2n-2 коли оцінюються два параметри? Cov(X,Y)=∑ni=1(Xi−X¯¯¯¯)(Yi−Y¯¯¯¯)n−1Cov(X,Y)=∑i=1n(Xi−X¯)(Yi−Y¯)n−1 \mathbb{Cov}\left(X, Y\right)=\frac{\sum_{i=1}^{n}\left(X_{i}-\overline{X}\right)\left(Y_{i}-\overline{Y}\right)}{n-1}

36 self-study  variance  covariance  descriptive-statistics  unbiased-estimator 

Було б вдячно, якщо можна було навести наступні приклади: Розподіл з нескінченною середньою і нескінченною дисперсією. Розподіл з нескінченною середньою і кінцевою дисперсією. Розподіл з кінцевою середньою і нескінченною дисперсією. Розподіл з кінцевою середньою і кінцевою дисперсією. Це походить від мене, коли я бачу ці незнайомі терміни (нескінченна середня, нескінченна …

35 distributions  variance  mean 

Велика картинка: Я намагаюся зрозуміти, як збільшення розміру вибірки збільшує силу експерименту. Слайди мого викладача пояснюють це малюнком 2 нормальних розподілів, одного для нульової гіпотези та одного для альтернативної гіпотези та порогу рішення c між ними. Вони стверджують, що збільшення розміру вибірки зменшить дисперсію і тим самим спричинить більш високий …

35 variance  sampling  power 

Дорогі всі - я помітив щось дивне, чого я не можу пояснити, чи не так? Підсумовуючи: ручний підхід до обчислення довірчого інтервалу в моделі логістичної регресії та функції R confint()дають різні результати. Я пережив прикладну логістичну регресію Hosmer & Lemeshow (2-е видання). У 3-й главі є приклад обчислення коефіцієнта шансів …

34 r  regression  logistic  confidence-interval  profile-likelihood  correlation  mcmc  error  mixture  measurement  data-augmentation  r  logistic  goodness-of-fit  r  time-series  exponential  descriptive-statistics  average  expected-value  data-visualization  anova  teaching  hypothesis-testing  multivariate-analysis  r  r  mixed-model  clustering  categorical-data  unsupervised-learning  r  logistic  anova  binomial  estimation  variance  expected-value  r  r  anova  mixed-model  multiple-comparisons  repeated-measures  project-management  r  poisson-distribution  control-chart  project-management  regression  residuals  r  distributions  data-visualization  r  unbiased-estimator  kurtosis  expected-value  regression  spss  meta-analysis  r  censoring  regression  classification  data-mining  mixture 

Я думаю, що чим більший коефіцієнт змінної, тим більше здатність моделі до того, щоб «розгойдуватися» в цьому вимірі, забезпечуючи збільшену можливість підключення шуму. Хоча я думаю, що у мене є розумний сенс взаємозв'язку між дисперсією моделі та великими коефіцієнтами, я не маю настільки хорошого розуміння того, чому вони трапляються в …

33 regression  variance  linear-model  bias  regularization 

Яка різниця між кінцевою та нескінченною дисперсією? Мої статистичні знання досить елементарні; Тут не дуже допомогла Wikipedia / Google.

33 variance  intuition  partial-moments 

Скажімо, у нас є випадкова величина із відомою дисперсією та середнім значенням. Питання: яка дисперсія для деякої заданої функції f. Єдиний загальний метод, який мені відомий - це метод дельта, але він дає лише апроксимацію. Тепер мене цікавить , але було б також непогано знати деякі загальні методи.f ( X …

33 variance  random-variable  delta-method 

Скажімо, є елементів, розділених на дві групи (m+nm+nm+nmmm іnnn ). Дисперсія першої групиσ2mσm2\sigma_m^2 а дисперсія другої групи -σ2nσn2\sigma^2_n . Вважається, що самі елементи невідомі, але я знаю засобиμmμm\mu_m іμnμn\mu_n . Чи є спосіб обчислити комбіновану дисперсію σ2(m+n)σ(m+n)2\sigma^2_{(m+n)} ? Дисперсія не повинна бути об'єктивною, тому знаменник (m+n)(m+n)(m+n) а не (m+n−1)(m+n−1)(m+n-1) .

32 variance  pooling 

У мене є змішана модель ефекту (насправді узагальнена добавна змішана модель), яка дає мені прогнози на час. Для протидії автокореляції я використовую модель corCAR1, враховуючи той факт, що у мене відсутні дані. Дані, як передбачається, дають мені загальне навантаження, тому мені потрібно підсумовувати весь інтервал прогнозування. Але я також повинен …

32 mixed-model  variance  random-variable 

Яка формула дисперсії продукту залежних змінних? У випадку незалежних змінних формула проста: var(XY)=E(X2Y2)−E(XY)2=var(X)var(Y)+var(X)E(Y)2+var(Y)E(X)2var(XY)=E(X2Y2)−E(XY)2=var(X)var(Y)+var(X)E(Y)2+var(Y)E(X)2 {\rm var}(XY) = E(X^{2}Y^{2}) - E(XY)^{2} = {\rm var}(X){\rm var}(Y) + {\rm var}(X)E(Y)^2 + {\rm var}(Y)E(X)^2 Але яка формула для корельованих змінних? До речі, як я можу знайти кореляцію на основі статистичних даних?

31 correlation  variance 

Я поясню свою проблему на прикладі. Припустимо, ви хочете передбачити дохід фізичної особи за деякими ознаками: {Вік, стать, країна, регіон, місто}. У вас такий навчальний набір даних train <- data.frame(CountryID=c(1,1,1,1, 2,2,2,2, 3,3,3,3), RegionID=c(1,1,1,2, 3,3,4,4, 5,5,5,5), CityID=c(1,1,2,3, 4,5,6,6, 7,7,7,8), Age=c(23,48,62,63, 25,41,45,19, 37,41,31,50), Gender=factor(c("M","F","M","F", "M","F","M","F", "F","F","F","M")), Income=c(31,42,71,65, 50,51,101,38, 47,50,55,23)) train CountryID RegionID …

29 regression  machine-learning  multilevel-analysis  correlation  dataset  spatial  paired-comparisons  cross-correlation  clustering  aic  bic  dependent-variable  k-means  mean  standard-error  measurement-error  errors-in-variables  regression  multiple-regression  pca  linear-model  dimensionality-reduction  machine-learning  neural-networks  deep-learning  conv-neural-network  computer-vision  clustering  spss  r  weighted-data  wilcoxon-signed-rank  bayesian  hierarchical-bayesian  bugs  stan  distributions  categorical-data  variance  ecology  r  survival  regression  r-squared  descriptive-statistics  cross-section  maximum-likelihood  factor-analysis  likert  r  multiple-imputation  propensity-scores  distributions  t-test  logit  probit  z-test  confidence-interval  poisson-distribution  deep-learning  conv-neural-network  residual-networks  r  survey  wilcoxon-mann-whitney  ranking  kruskal-wallis  bias  loss-functions  frequentist  decision-theory  risk  machine-learning  distributions  normal-distribution  multivariate-analysis  inference  dataset  factor-analysis  survey  multilevel-analysis  clinical-trials 

Чи можна перевірити на скінченність (або існування) дисперсії випадкової величини, що дається вибіркою? Як нуль, або {варіація існує і є кінцевою}, або {дисперсія не існує / є нескінченною} було б прийнятним. Філософсько (і обчислювально) це здається дуже дивним, оскільки не повинно бути різниці між сукупністю без кінцевої дисперсії та кількістю …

29 hypothesis-testing  variance  central-limit-theorem 

Я намагаюся придумати метрику для вимірювання нерівномірності розподілу для експерименту, який я виконую. У мене є випадкова змінна, яка повинна бути рівномірно розподілена в більшості випадків, і я хотів би мати можливість визначити (і, можливо, виміряти ступінь) прикладів наборів даних, де змінна не рівномірно розподілена в межах деякої межі. Приклад …

28 distributions  variance  random-variable  uniform