试验数据异常值的检验及剔除方法

《试验数据异常值的检验及剔除方法》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、内江师范学院本科学年论文目录摘要I关键词I1引言12异常值的判别方法12.1检验（3S）准则12.2狄克松（Dixon）准则22.3格拉布斯（Grubbs）准则22.4指数分布时异常值检验32.5莱茵达准则（PanTa）32.6肖维勒准则（Chauvenet）43实验异常数据的处理44结束语5参考文献66内江师范学院本科学年论文试验数据异常值的检验及剔除方法摘要：在实验中不可避免会存在一些异常数据，而异常数据的存在会掩盖研究对象的变化规律和对分析结果产生重要的影响，异常值的检验与正确处理是保证原始数

2、据可靠性、平均值与标准差计算准确性的前提.本文简述判别测量值异常的几种统计学方法，并利用DPS软件检验及剔除实验数据中异常值，此方法简单、直观、快捷，适合实验者用于实验的数据处理和分析.关键词：异常值检验；异常值剔除；DPS；测量数据6内江师范学院本科学年论文1引言在实验中，由于测量产生误差，从而导致个别数据出现异常，往往导致结果产生较大的误差，即出现数据的异常.而异常数据的出现会掩盖实验数据的变化规律，以致使研究对象变化规律异常，得出错误结论.因此，正确分析并剔除异常值有助于提高实验精度.判别实验

3、数据中异常值的步骤是先要检验和分析原始数据的记录、操作方法、实验条件等过程，找出异常值出现的原因并予以剔除.利用计算机剔除异常值的方法许多专家做了详细的文献[1]报告.如王鑫，吴先球，用Origin剔除线形拟合中实验数据的异常值；严昌顺．用计算机快速剔除含粗大误差的“环值”；运用了统计学中各种判别异常值的准则，各种准则的优劣程度将体现在下文.2异常值的判别方法判别异常值的准则很多，常用的有检验（3S）准则、狄克松（Dixon）准则、格拉布斯（Grubbs）准则等准则.下面将一一简要介绍.2.1检验（

4、3S）准则检验准则又称罗曼诺夫斯基准则，它是按分布的实际误差分布范围来判别异常值，对重复测量次数较少的情况比较合理.基本思想：首先剔除一个可疑值，然后安分布来检验被剔除的值是否为异常值.设样本数据为，若认为可疑值.计算余下个数据平均值及标准差，即.然后，按分布来判别被剔除的值是否为异常值.若，则为异常值，应予剔除，否则为正常值，应予以保留.其中：为显著水平；数据个数；为检验系数，可通过查表得到.6内江师范学院本科学年论文1.1狄克松（Dixon）准则设有一组测量数据，且为正态分布，则可能为异常值的测

5、量数据必然出现在两端，即或.狄克松给出了不同样本数量时检验统计量的计算公式（见表1）.当显著水平为1%或5%时，狄克松给出了其临界值.如果测量数据的检验统计量，则为异常值，如果测量数据的检验统计量，则为异常值.表1狄克松检验统计量计算公式为数据个数统计量为可疑值为可疑值1.2格拉布斯（Grubbs）准则设有一组测量数据为正态分布，为了检验数据中是否存在异常值，将其按大小顺序排列，即，可能为异常值的测量数据一定出现在最大或最小的数据中.若最小值是可疑的，则检验统计量.式中是均值、是标准差，即.对于检验

6、统计量，格拉布斯导出了其统计分布，并给出了当显著水平为1%或5%时的临界值.称格拉布斯系数，可通过抽查表得到.当最小值或最大值对应的检验统计量大于临界值时，则认为与之对应的或为可疑异常值，应予以剔除.6内江师范学院本科学年论文1.1指数分布时异常值检验设一组测量数据为指数分布，为了检验数据中是否存在异常值，将其按大小顺序排列，即.检验最小值或最大值是否为异常值的检验方法如下：当样本量时，计算统计量及对于给定的显著水平（通常取0.5）和样本数量，通过查表得到及分别对应的临界值和.若时，认为为异常值；若

7、时，认为为异常值.当样本容量时，计算统计量及.对于给定显著水平和样本数量，若，则判断为异常值；若，则判断为异常值.1.2莱茵达准则（PanTa）对于实验数据测出值，求取其算术平均值及剩余误差值，然后求出其均方根偏差.判别依据（假设服从正态分布）：，则相对而言误差较大，应舍去；，为正常数据，应该保留.有概率论统计可知，如果误差服从正要分布，误差大于的观测数据出现的概率小于0.003，相当大于300次观测中有一次出现的可能.莱茵达准则只是进行粗略的剔除，取舍的概率较小，可能将不合理的异常值保留.6内江师

8、范学院本科学年论文1.1肖维勒准则（Chauvenet）次准则也是建立在实验数据服从正态分布.假设多次测量的个测量值中，数据的参与误差，则剔除该数据.其中，样品容量为时的判别系数，弥补了莱茵达准则的不足，故此准则优胜于莱茵达准则，但条件更为苛刻.2实验异常数据的处理对于测定中异常数据的处理，必须慎重考虑，不能凭预感任意删除或添加.应该从所学知识上考虑，异常值有时能反映试验中的某些新现象.这类“异常值”正深化人们对客观事物的认识，如果随意删除它，可能深入了解和发现新事物