Як вивести стандартну похибку коефіцієнта лінійної регресії


20

Для цієї одновимірної лінійної регресійної моделі

yi=β0+β1xi+ϵi
задано набір даних , оцінки коефіцієнтів Ось моє запитання відповідно до книги та Вікіпедії , стандартна помилка є Як і чому?β 1 = Σ я х я у я - п ˉ х ˉ уD={(x1,y1),...,(xn,yn)} β 0= ˉ у - β 1 ˉ х
β^1=∑ixiyi−nx¯y¯nx¯2−∑ixi2
β^0=y¯−β^1x¯
з β 1=√β^1
sβ^1=∑iϵ^i2(n−2)∑i(xi−x¯)2


@ocram, дякую, але я не зовсім здатний обробляти матричні речі, я спробую.
— авокадо

1
@ocram, я вже зрозумів, як це відбувається. Але все ще питання: у моєму дописі стандартна помилка має , де згідно з вашою відповіддю це не так, чому? (n−2)
— авокадо

Відповіді:


15

3-й коментар вище: Я вже зрозумів, як це відбувається. Але все ще питання: у моєму дописі стандартна помилка має (n − 2), де відповідно до вашої відповіді це не так, чому?


У моєму дописі виявлено, що Знаменник можна записати як Таким чином,

se^(b^)=nσ^2n∑xi2−(∑xi)2.
n∑i(xi−x¯)2
se^(b^)=σ^2∑i(xi−x¯)2

З тобто середньоквадратична помилка (MSE) в таблиці ANOVA, ми закінчуємо вашим виразом для . Термін пояснює втрату 2 ступеня свободи в оцінці перехоплення та нахилу.

σ^2=1n−2∑iϵ^i2
se^(b^)n−2

1
Я думаю, що я змушую все інше очікувати на останню частину. Чи можете ви показати крок за кроком, чому ? Я теж знаю, що це пов'язано зі ступенями свободи, але я не отримую математики. σ^2=1н-2∑iϵ^i2
— Mappi

2

Інший спосіб мислення щодо n-2 df полягає в тому, що ми використовуємо 2 засоби для оцінки коефіцієнта нахилу (середнє значення Y і X)

df з Вікіпедії: "... Взагалі, ступеня свободи оцінки параметра дорівнює кількості незалежних балів, які входять в оцінку за вирахуванням кількості параметрів, що використовуються як проміжні кроки в оцінці самого параметра. . "


2
Це насправді не похідне як таке, хоча це інтуїція. Однак про деякі тонкощі, пов’язані з цим, див. Як зрозуміти ступінь свободи?
— Срібна рибка
Використовуючи наш веб-сайт, ви визнаєте, що прочитали та зрозуміли наші Політику щодо файлів cookie та Політику конфіденційності.
Licensed under cc by-sa 3.0 with attribution required.