资源描述:
《概率论第五章 大数定律和中心极限定理.ppt》由会员上传分享,免费在线阅读,更多相关内容在教育资源-天天文库。
1、概率论与数理统计第五章大数定律和中心极限定理大数定律中心极限定理概率论与数理统计是研究随机现象统计规律性的学科.随机现象的规律性只有在相同的条件下进行大量重复试验时才会呈现出来.也就是说,要从随机现象中去寻求必然的法则,应该研究大量随机现象.研究大量的随机现象,常常采用极限形式,由此导致对极限定理进行研究.极限定理的内容很广泛,其中最重要的有两种:与大数定律中心极限定理本章要解决的问题:1.为何能以某事件发生的频率作为该事件的概率的估计?2.为何能以样本均值作为总体期望的估计?3.为何正态分布在概率论中占有极
2、其重要的地位?4.大样本统计推断的理论基础是什么?大数定律中心极限定理答复1.随着试验次数增大,事件发生的频率稳定于某个常数;2.实践中大量测量值的算术平均值也具有稳定性.人们正是研究了这些稳定性得到了大数定律.大数定律的客观背景大量抛掷硬币正面出现频率字母使用频率生产过程中的废品率设{Xn}为随机变量序列,a为常数,若任给>0,使得则称{Xn}依概率收敛于a.可记为性质:一.依概率收敛5.1大数定律函数g(x,y)在(a,b)连续,设则a意思是:当时,Xn落在内的概率越来越大.而意思是:,当即Xn落在内.
3、二.几个常用的大数定律定理1(切比雪夫大数定理)设X1,X2,…是相互独立的随机变量序列,且期望存在E(Xi)=mi,它们都有有限的方差,并且方差有共同的上界,即D(Xi)=si2≤K,i=1,2,…,则对任给>0,有切比雪夫切比雪夫大数定理表明,独立随机变量序列{Xn},如果方差有共同的上界,则与其数学期望偏差很小的切比雪夫大数定理给出了平均值稳定性的科学描述概率接近于1.即当n充分大时,差不多不再是随机的了,取值接近于其数学期望的概率接近于1.证明切比雪夫大数定律主要的数学工具是切比雪夫不等式.设随机变
4、量X有期望E(X)和方差,则对于任给>0,作为切比雪夫大数定理的特殊情况,有下面的定理.定理2(独立同分布下的大数定理)设X1,X2,…是独立同分布的随机变量序列,且E(Xi)=,D(Xi)=2>0,i=1,2,…,则即对任给>0,有设fA是n次独立重复试验中事件A发生的次数,p是事件A在每次试验中发生的概率,则对任给的ε>0,或定理3.伯努利大数定理伯努利下面给出定理2的一种特例.证明:因为fA~b(n,p)第i次试验事件A发生第i次试验事件A不发生则由切比雪夫大数定理设伯努利大数定律表明,当重复试验
5、次数n充分大时,事件A发生的频率fA/n与事件A的概率p有较大偏差的概率很小.伯努利大数定律提供了通过试验来确定事件概率的方法.任给ε>0,下面给出的独立同分布下的大数定理,不要求随机变量的方差存在.设随机变量序列X1,X2,…独立同分布,具有有限的数学期E(Xi)=μ,i=1,2,…,则对任给ε>0,定理4(辛钦大数定理)辛钦例如要估计某地区的平均亩产量,要收割某些有代表性的地块,例如n块.计算其平均亩产量,则当n较大时,可用它作为整个地区平均亩产量的一个估计.这一讲我们介绍了大数定律大数定律以严格的数学形
6、式表达了随机现象最根本的性质之一:它是随机现象统计规律的具体表现.大数定律在理论和实际中都有广泛的应用.平均结果的稳定性休息片刻继续下一讲在实际问题中,常常需要考虑许多随机因素所产生总影响.例如:炮弹射击的落点与目标的偏差,就受着许多随机因素的影响.中心极限定理的客观背景空气阻力所产生的误差,对我们来说重要的是这些随机因素的总影响.如瞄准时的误差,炮弹或炮身结构所引起的误差等等.观察表明,如果一个量是由大量相互独立的随机因素的影响所造成,而每一个别因素在总影响中所起的作用不大.则这种量一般都服从或近似服从正态
7、分布.自从高斯指出测量误差服从正态分布之后,人们发现,正态分布在自然界中极为常见.现在我们就来研究独立随机变量之和所特有的规律性问题.当n无限增大时,这个和的极限分布是什么呢?在什么条件下极限分布会是正态的呢?由于无穷个随机变量之和可能趋于∞,故我们不研究n个随机变量之和本身而考虑它的标准化的随机变量的分布函数的极限.的分布函数的极限.可以证明,满足一定的条件,上述极限分布是标准正态分布.考虑在概率论中,习惯于把和的分布收敛于正态分布这一类定理都叫做中心极限定理.定理1(独立同分布下的中心极限定理)它表明,当
8、n充分大时,n个具有期望和方差的独立同分布的r.v之和近似服从正态分布.设X1,X2,…是独立同分布的随机变量序列,且E(Xk)=<,D(Xk)=2>0,k=1,2,…,则5.2中心极限定理定理2(李雅普诺夫定理)则随机变量之和的标准化变量定理2表明:(如实例中射击偏差服从正态分布)定理3(棣莫佛-拉普拉斯定理)定理表明,当n很大,0