随机事件及概率
一维随机变量(离散型+连续型)
- 离散型随机变量分布律/连续型随机变量概率密度
- 概率密度f(x)
- 分布函数<——> 概率密度的互推
- 重难点(步骤):求连续型变量X的函数Y(X)的分布函数和概率密度
二维随机变量(离散型+连布续型)
- 离散型随机变量联合分/边缘分布/条件分布(分布律)
- 连续型随机变量联合分布/边缘分布/条件分布(概率密度)
- 最难点:两个连续型随机变量的函数的分布 Z=X+Y、Z=XY、Z=YX、Z=max{X,Y}...
- 独立性
随机变量的数字特征
- 数学期望E(X)
- 离散型/连续型E(X)公式
- 随机变量的函数的数学期望
- 离散/连续
- 一个随机变量/两个随机变量的函数
- 期望的性质
- 方差D(X)
- D(X)与E(X)的关系式
- 标准化变量X∗=σX−μ
- 四个性质
- 切比雪夫(Chebyshev)不等式 P{∣X−μ∣≥ε}≤ε2σ2或P{∣X−μ∣≤ε}≥1−ε2σ2
- 协方差Cov(X,Y)、相关系数ρXY
- 协方差
- 定义式:Cov(X,Y)=E{[X−E(X)]2[Y−E(Y)]2}
- 计算式:Cov(X,Y)=E(XY)−E(X)E(Y)
- 相关系数
- 定义:ρXY=D(X)D(Y)Cov(X,Y)
- 含义:X、Y相关程度 (仅就线性关系来说)
- 矩
大数定律和中心极限定理
- 辛钦大数定律 --> 伯努利大数定律
- 独立同分布的中心极限定理
- 李雅普诺夫(Lyapunov)定理
- 棣莫弗-拉普拉斯(De Moivre-Laplace)定理
样本及抽样分布
- 统计学三大分布
- X2分布 X2∼X2(n)
- X服从总体N(0,1) --> 统计量X2=X12+X22+⋯+Xn2
- 可加性:X12+X22∼X2(n1+n2)
- E(X2)=n,D(X2)=2n
- t分布 t∼t(n)
- X∼N(0,1),Y∼X2(n) --> 随机变量t=Y/nX
- F分布 F∼F(n1,n2)
- U∼X2(n1),V∼X2(n2) --> F=V/n2U/n1
参数估计
- 点估计(估计量、估计值)
- 矩估计:n充分大时,样本矩等于总体矩
- 总体一阶矩E(X)= 样本均值Xˉ --> 得到参数θ的矩估计量θ^
- 最大似然估计:使得样本x1,x2,⋯,xn发生的概率最大的θ值最恰当
- 求似然函数L(θ)=L(x1,x2,⋯,xn;θ)=i=1∏np(xi;θ)
- 取对数lnL(θ)
- 求驻点得到θ^
- 估计量的评选标准
- 无偏性:E(θ^)=θ
- 有效性:比较D(θ^)
- 相和性
常见分布
- 二项分布 X∼B(n,p)
- E=np,D=np(1−p)
- 均匀分布 X∼U(a,b)
- 正态分布 X∼N(μ,σ2)
- 泊松分布 X∼π(λ)
- E(X)=D(X)=λ
- 指数分布X∼e(θ)
- E(X)=θ,D(X)=θ2
- 几何分布X∼Ge(p)
- E(X)=p1, D(X)=p21−p