截面与面板数据分析 · 经济学专业本科生课程

一元线性回归

Simple Linear Regression · Chapter 2

班级规模 X 成绩 Y Ŷ = β̂₀ + β̂₁X 残差 û

一条直线 + 一组残差:本课程所有方法的起点

Agenda

本课地图

01

模型与估计

Y = β0 + β1X + u;OLS 在最小化什么;拟合优度 R²

P3–7
02

假设与抽样分布

三个假设保证无偏一致;标准误由什么决定

P8–10
03

异方差与 Gauss-Markov

哪种方差更现实;稳健标准误;BLUE 的适用范围

P11–12
04

检验与置信区间

t 统计量、单边双边、p 值、置信区间怎么读

P13
一、模型与估计

一个方程加一个误差项

Yi = β0 + β1Xi + ui

i = 1, …, n 个学区;Y 为平均成绩,X 为平均班级规模

β1 斜率

X 每增加 1 单位,Y 平均变化 β1。我们最关心的系数,因为它表示 X 与 Y 关系的方向和大小。

β0 截距

X = 0 时 Y 的预测值。常常没有实际含义(班级规模为 0 无意义),只是让直线位置合适。

u 误差项

除 X 之外所有影响 Y 的因素:遗漏变量、测量误差、个体随机性。它承认我们解释不了全部。

术语 Y 叫因变量(dependent variable)或被解释变量;X 叫自变量(independent variable)或回归变量(regressor)。

一、模型与估计
课堂互动

OLS 在最小化什么:亲手拖一条线

拖动截距和斜率,看残差平方和 SSR 怎么变;再点"显示 OLS 最优"对比。

SSR = Σ ûᵢ² = —

—

OLS 的选择就是让 SSR 最小的那条线;任何别的线 SSR 都更大。

一、模型与估计

把最小化做出来:OLS 估计量

β̂1 =Σi=1n (Xi − X̄)(Yi − Ȳ)Σi=1n (Xi − X̄)2=sXYsX2

β̂0 = Ȳ − β̂1X̄

预测值与残差 Ŷi = β̂0 + β̂1Xi,ûi = Yi − Ŷi。注意区分:β、u 是总体里未知的真值,β̂、û 是用样本算出的估计。

读法 β̂1 是 X 与 Y 的样本协方差除以 X 的样本方差:X 变动时 Y 跟着同向变动的部分,按 X 自身的变动幅度标准化。

一、模型与估计

这条线解释了多少变化:R²

SST 总平方和

Σ (Yi − Ȳ)2

Y 围绕自己均值的总波动

SSE 解释平方和

Σ (Ŷi − Ȳ)2

被回归线解释掉的部分

SSR 残差平方和

Σ ûi2

线解释不了、剩下的部分

SST = SSE + SSR  R2 = SSESST = 1 − SSRSST

R² 是"回归线解释的波动占总波动的比例",介于 0 与 1 之间。

提醒 R² 高不等于因果、也不等于模型对;它只回答"拟合得好不好",不回答"识别得对不对"。

二、假设与抽样分布

OLS 无偏一致靠的三个假设

1

零条件均值:E(ui | Xi) = 0

误差与 X 不相关。若遗漏变量又与 X 相关,这条就破,估计有偏——这是后面所有内生性讨论的源头。

2

独立同分布:(Xi, Yi) i.i.d.

样本是随机抽样的结果,观测之间相互独立。简单随机抽样满足它;聚类或面板数据要另外处理。

3

大异常值很少:四阶矩有限

X 和 Y 不存在极端到主导一切的观测。一个超级异常点就能把 OLS 线拽走。

结论 三个假设都成立时,β̂0、β̂1 是无偏且一致的:样本越大,估计越贴近真值。

二、假设与抽样分布
课堂互动

标准误由什么决定:拖一拖 n 和误差波动

σ2β̂1 = 1n · var[(Xi − μX)ui][var(Xi)]2

大样本下 β̂1 近似正态,方差由上式给出(SW 4.21)

同方差时简化为 SE(β̂1) = √σu2n · σX2

三个决定因素:样本量 n 越大越准;X 的波动 σX 越大越准;误差的波动 σu 越大越不准。

SE(β̂₁)—

—

固定 σX = 2 作演示。注意 SE 按 1/√n 缩小:n 翻四倍,SE 才减半。

三、异方差与GM

同方差 vs 异方差:误差的波动稳定吗

同方差:波动不随 X 变

残差上下 spread 大致恒定。

异方差:波动随 X 变

X 越大残差 spread 越开(喇叭形)。

哪个更现实? 取决于应用,但经济理论很少给出误差同方差的理由。除非有充分依据,一般接受异方差。

实践含义 异方差下若仍按同方差算标准误,SE 不准、检验失真。直接用异方差稳健标准误即可;即便真实是同方差,用它也不影响结果。所以默认开稳健 SE 是最省心的做法。

三、异方差与GM

Gauss-Markov:OLS 什么时候"最有效"

在同方差以及前述假设下,OLS 是所有线性无偏估计量中方差最小的,即 BLUE(Best Linear Unbiased Estimator)。"Best" 指方差最小,"Linear" 指对 Y 线性。

但注意前提:同方差。一旦异方差,OLS 仍无偏一致,却不再是最有效的;而稳健标准误修正的正是推断部分。这就是"估计用 OLS、推断用稳健 SE"的组合。

也不要迷信 BLUE:它只在"线性无偏"这个圈子里比。若愿意放弃无偏或线性,存在方差更小的估计量;效率不是唯一标准,无偏性与稳健性同样重要。

四、检验与置信区间
课堂互动

t 检验与置信区间:拖一拖估计值

t = β̂1 − β1,0SE(β̂1)  CI: β̂1 ± 1.96·SE

检验 H₀: β1 = 0;95% 置信区间用 ±1.96 个标准误

-3.50 = 无效应+0.5

t = — 95% CI = [—, —]

—

单边 vs 双边 H₁: β1 ≠ 0 是双边;H₁: β1 < 0 是单边。两者 t 统计量构造相同,差别只在对尾部的解释:单边只看一侧的尾概率。

小结
随堂练习

小结与随堂练习

这节课讲了什么

1 模型

Y = β0 + β1X + u;β1 是关系的方向与大小,u 承认解释不了全部

2 估计

OLS 最小化 SSR;R² 只回答拟合好坏,不回答因果

3 推断基础

三个假设给无偏一致;SE 随 n 增大按 1/√n 缩小;默认用稳健 SE

4 判断

t 统计量与置信区间;CI 不含 0 等价于 5% 水平拒绝

✎ 算一算、想一想

某回归得 β̂₁ = −1.20,SE = 0.48,n = 420。

请回答(点一下看提示):

+ ① t 统计量是多少?5% 水平下显著吗?
提示:t = −1.20/0.48 = −2.5,|t| > 1.96,显著
+ ② 95% 置信区间是多少?
提示:−1.20 ± 1.96×0.48 ≈ [−2.14, −0.26],不含 0
+ ③ 若样本量翻到 1680,SE 大约变多少?
提示:n 翻 4 倍,SE 减半 → 约 0.24
思政点睛

回归给出关系,
识别才给出因果

一条拟合线可以很好地描述数据,却不一定回答"因为 X 所以 Y"。
把描述当因果,是实证研究里最常见也最贵的错误。
本章的工具是地基;第七章的识别策略,才是把关系变成证据的桥梁。
经世济民,学以致用。

课后思考:找一个 R² 很高但显然不是因果的回归例子(如冰淇淋销量与溺水人数),说明误差项里藏着什么。