第十二章

概率论与数理统计

概率、分布、数字特征、估计与假设检验

数学二不考本部分。条目按数学一大纲书写。

事件运算与概率

德摩根律:

AB=AˉBˉ,AB=AˉBˉ.\overline{A\cup B}=\bar A\cap\bar B,\quad \overline{A\cap B}=\bar A\cup\bar B. P(Ω)=1, P()=0, 0P(A)1,P(Aˉ)=1P(A),P(AB)=P(A)+P(B)P(AB).\begin{aligned} P(\Omega)&=1,\ P(\emptyset)=0,\ 0\le P(A)\le 1,\\ P(\bar A)&=1-P(A),\\ P(A\cup B)&=P(A)+P(B)-P(AB). \end{aligned}

Ω\Omega 为必然事件,\emptyset 为空事件,Aˉ\bar AAA 的对立事件。ABAB 表示积事件 ABA\cap B

条件概率(P(B)>0P(B)>0):

P(AB)=P(AB)P(B).P(A|B)=\frac{P(AB)}{P(B)}.

乘法公式:P(AB)=P(A)P(BA)P(AB)=P(A)P(B|A)。全概率公式:设 BiB_i 为完备事件组,

P(A)=iP(Bi)P(ABi).P(A)=\sum_i P(B_i)P(A|B_i).

贝叶斯公式:

P(BjA)=P(Bj)P(ABj)iP(Bi)P(ABi).P(B_j|A)=\frac{P(B_j)P(A|B_j)}{\sum_i P(B_i)P(A|B_i)}.

相互独立:P(AB)=P(A)P(B)P(AB)=P(A)P(B)。两两独立不能推出相互独立。

古典概型:样本点等可能。几何概型:概率等于长度、面积或体积之比。

易错 互不相容(互斥)不是相互独立。P(AB)P(A|B)BB 已发生,样本空间缩到 BB。全概率公式的 BiB_i 必须构成完备事件组。

一维随机变量

分布函数 F(x)=P{Xx}F(x)=P\{X\le x\}:右连续,单调不减,F()=0F(-\infty)=0F(+)=1F(+\infty)=1

离散型:分布列 P{X=xk}=pkP\{X=x_k\}=p_kpk=1\sum p_k=1F(x)=xkxpkF(x)=\sum_{x_k\le x}p_k

连续型:概率密度 f(x)0f(x)\ge 0+f=1\int_{-\infty}^{+\infty}f=1F(x)=xfF(x)=\int_{-\infty}^{x}fP{a<Xb}=abfP\{a<X\le b\}=\int_a^b f。连续型 P{X=a}=0P\{X=a\}=0

随机变量函数的分布:严格单调时 Y=g(X)Y=g(X) 的概率密度 fY(y)=fX(h(y))h(y)f_Y(y)=f_X(h(y))|h'(y)|,其中 h=g1h=g^{-1}

常见分布

分布分布列或概率密度数学期望方差
00-11 分布 B(1,p)B(1,p)P{X=1}=pP\{X=1\}=pppp(1p)p(1-p)
二项分布 B(n,p)B(n,p)Cnkpk(1p)nkC_n^k p^k(1-p)^{n-k}npnpnp(1p)np(1-p)
泊松分布 P(λ)P(\lambda)eλλk/k!\mathrm{e}^{-\lambda}\lambda^k/k!λ\lambdaλ\lambda
几何分布 G(p)G(p)(1p)k1p(1-p)^{k-1}p(首次成功)1/p1/p(1p)/p2(1-p)/p^2
均匀分布 U(a,b)U(a,b)1/(ba)1/(b-a)(a+b)/2(a+b)/2(ba)2/12(b-a)^2/12
指数分布 E(λ)E(\lambda)λeλx (x>0)\lambda\mathrm{e}^{-\lambda x}\ (x>0)1/λ1/\lambda1/λ21/\lambda^2
正态分布 N(μ,σ2)N(\mu,\sigma^2)12πσe(xμ)2/(2σ2)\dfrac{1}{\sqrt{2\pi}\,\sigma}\mathrm{e}^{-(x-\mu)^2/(2\sigma^2)}μ\muσ2\sigma^2

标准化:XμσN(0,1)\dfrac{X-\mu}{\sigma}\sim N(0,1)。泊松分布是二项分布 nn\to\inftynpλnp\to\lambda 的极限。指数分布无记忆性:P{X>s+tX>s}=P{X>t}P\{X>s+t\mid X>s\}=P\{X>t\}

易错 几何分布有的书从 00 开始计数,数学期望会变成 (1p)/p(1-p)/p。指数分布参数有的书用 θ=1/λ\theta=1/\lambda。计算前先看概率密度的写法。

二维随机变量

联合分布函数 F(x,y)=P{Xx,Yy}F(x,y)=P\{X\le x,\,Y\le y\}。离散型用联合分布列 pijp_{ij};连续型用联合概率密度 f(x,y)f(x,y)P{(X,Y)D}=DfP\{(X,Y)\in D\}=\iint_D f

边缘概率密度:fX(x)=+f(x,y)dyf_X(x)=\int_{-\infty}^{+\infty}f(x,y)\,\mathrm{d}y。条件概率密度:fXY(xy)=f(x,y)/fY(y)f_{X|Y}(x|y)=f(x,y)/f_Y(y)fY(y)>0f_Y(y)>0)。

相互独立     F(x,y)=FX(x)FY(y)    \iff F(x,y)=F_X(x)F_Y(y)\iff 联合概率密度(或联合分布列)可写成边缘之积。

Z=X+YZ=X+Y:相互独立时概率密度为卷积 fZ=fXfYf_Z=f_X*f_Y。相互独立的正态随机变量的线性组合仍服从正态分布。

数字特征

E(X)=xkpkxf(x)dx.E(X)=\sum x_k p_k \quad\text{或}\quad \int_{-\infty}^{\infty}x f(x)\,\mathrm{d}x. E(g(X))=g(x)f(x)dx,D(X)=E(X2)[E(X)]2.E(g(X))=\int g(x)f(x)\,\mathrm{d}x,\quad D(X)=E(X^2)-[E(X)]^2. E(aX+bY)=aE(X)+bE(Y),D(aX+b)=a2D(X).E(aX+bY)=aE(X)+bE(Y),\quad D(aX+b)=a^2 D(X).

独立时 E(XY)=E(X)E(Y)E(XY)=E(X)E(Y)D(X±Y)=D(X)+D(Y)D(X\pm Y)=D(X)+D(Y)

协方差 Cov(X,Y)=E(XY)E(X)E(Y)\mathrm{Cov}(X,Y)=E(XY)-E(X)E(Y)。相关系数

ρXY=Cov(X,Y)D(X)D(Y),ρ1.\rho_{XY}=\frac{\mathrm{Cov}(X,Y)}{\sqrt{D(X)D(Y)}},\quad |\rho|\le 1.

ρ=0\rho=0 称不相关。相互独立 \Rightarrow 不相关;二维正态时二者等价。一般不相关不必相互独立。

易错 D(X+Y)=D(X)+D(Y)+2Cov(X,Y)D(X+Y)=D(X)+D(Y)+2\mathrm{Cov}(X,Y),只有不相关才能去掉协方差。E(X2)E(X^2)[E(X)]2[E(X)]^2 不要写反。

大数定律与中心极限定理

切比雪夫不等式:P{XE(X)ε}D(X)/ε2P\bigl\{|X-E(X)|\ge\varepsilon\bigr\}\le D(X)/\varepsilon^2

切比雪夫大数定律:两两不相关、方差一致有界,则 Xˉn\bar X_n 依概率收敛于 μ\mu

伯努利大数定律:频率依概率收敛于 pp。辛钦大数定律:独立同分布且数学期望存在,则样本均值依概率收敛于数学期望。

棣莫弗-拉普拉斯定理:二项分布标准化后依分布收敛于 N(0,1)N(0,1)

列维-林德伯格中心极限定理:独立同分布,数学期望与方差有限,则

i=1nXinμσn\frac{\sum_{i=1}^{n} X_i-n\mu}{\sigma\sqrt{n}}

依分布收敛于 N(0,1)N(0,1),即渐近服从标准正态分布。

抽样分布

样本均值 Xˉ\bar X,样本方差 S2=1n1(XiXˉ)2S^2=\frac{1}{n-1}\sum(X_i-\bar X)^2

XiX_i 独立同分布于 N(μ,σ2)N(\mu,\sigma^2),则

XˉN(μ,σ2/n),(n1)S2σ2χ2(n1),XˉμS/nt(n1).\bar X\sim N\bigl(\mu,\sigma^2/n\bigr),\quad \frac{(n-1)S^2}{\sigma^2}\sim\chi^2(n-1),\quad \frac{\bar X-\mu}{S/\sqrt{n}}\sim t(n-1).

两独立正态总体:F=S12/σ12S22/σ22F(n11,n21)F=\dfrac{S_1^2/\sigma_1^2}{S_2^2/\sigma_2^2}\sim F(n_1-1,n_2-1)

χ2(n)\chi^2(n) 的期望 nn、方差 2n2ntt 分布偶函数。FF 分布 F1α(n1,n2)=1/Fα(n2,n1)F_{1-\alpha}(n_1,n_2)=1/F_\alpha(n_2,n_1)

参数估计

矩估计:用样本矩代替总体矩。极大似然估计:使似然函数 L(θ)L(\theta) 达到最大的 θ^\hat\theta,常对 lnL\ln L 求导。

无偏:E(θ^)=θE(\hat\theta)=\thetaXˉ\bar Xμ\mu 的无偏估计;S2S^2σ2\sigma^2 的无偏估计,而 1n(XiXˉ)2\frac{1}{n}\sum(X_i-\bar X)^2 有偏。

单个正态总体:

均值、σ2\sigma^2 已知:Xˉ±uα/2σ/n\bar X\pm u_{\alpha/2}\sigma/\sqrt{n}

均值、σ2\sigma^2 未知:Xˉ±tα/2(n1)S/n\bar X\pm t_{\alpha/2}(n-1)S/\sqrt{n}

方差:[(n1)S2/χα/22(n1), (n1)S2/χ1α/22(n1)]\bigl[(n-1)S^2/\chi^2_{\alpha/2}(n-1),\ (n-1)S^2/\chi^2_{1-\alpha/2}(n-1)\bigr]

两个正态总体可给出均值差、方差比的置信区间(大纲要求会求)。

易错 样本方差分母是 n1n-1χ2\chi^2 分位数左右不对称,不能用 ±\pm。极大似然的定义域约束(均匀分布上限)要用单调性而不是求导。

假设检验

显著性检验:提出原假设 H0H_0 与备择假设 H1H_1,在 H0H_0 成立时构造统计量,由显著性水平 α\alpha 确定拒绝域。

两类错误:第一类错误(弃真),H0H_0 为真却拒绝,P=αP=\alpha;第二类错误(取伪),H0H_0 为假却接受。α\alpha 减小通常使第二类错误变大。

单个正态总体:均值用 uu 检验或 tt 检验,方差用 χ2\chi^2 检验。两个正态总体:均值差用 tt 检验,方差比用 FF 检验。

步骤 提出假设 → 选择统计量 → 给定 α\alpha 确定拒绝域 → 代入样本作出判断。

易错 双侧还是单侧由备择假设决定。不要把第一类错误理解成“H0H_0 为假却接受”。

本手册仅供公式速查,定理及公式的适用条件以当年考试大纲与教材为准。