概率论与数理统计 · 第五章
大数定律及中心极限定理
依概率收敛、大数定律与正态近似
大数定律
随机变量序列 Xn 依概率收敛于 X,记为 XnPX,若对任意 ε>0,
P{∣Xn−X∣≥ε}→0.
辛钦大数定律:X1,X2,… 独立同分布且 E∣Xi∣<∞ 时,样本均值依概率收敛于总体均值。
伯努利大数定律:重复独立试验中,事件发生的频率依概率收敛于其概率 p。
易错 大数定律说明均值或频率的稳定性,不说明单个随机变量趋于常数。
中心极限定理
独立同分布中心极限定理:若 Xi 独立同分布,E(Xi)=μ,D(Xi)=σ2<∞,则
σn∑i=1nXi−nμdN(0,1).
李雅普诺夫中心极限定理允许各变量不同分布。设它们独立,E(Xi)=μi、D(Xi)=σi2,Bn2=∑σi2;若存在 δ>0 使
Bn2+δ1i=1∑nE∣Xi−μi∣2+δ→0,
则标准化和依分布收敛于标准正态分布。
棣莫夫-拉普拉斯定理(也译棣莫弗-拉普拉斯)是二项分布的正态近似:
np(1−p)X−npdN(0,1).
离散分布用正态近似时可作连续性修正,例如 P(X≤k) 对应正态变量上界取 k+0.5。
易错 中心极限定理描述标准化“和”的分布,不是原变量本身变成正态分布。