概率论与数理统计PPT课件第八章假设检验.ppt

1,第八章 假设检验,假设检验是统计推断的一个主要部分.在科学研究,日常工作甚至生活中经常对某一件事情提出疑问.解决疑问的过程往往是先做一个和疑问相关的假设,然后在这个假设下去寻找有关的证据.如果得到的证据是和假设相矛盾的,就要否定这个假设.,2,8.1 假设检验的概念,当总体分布函数完全未知或只知其形式、但不知其参数的情况，为推断总体的性质，提出某些关于总体的假设。,为判断所作的假设是否正确,从总体中抽取样本,根据样本的取值,按一定的原则进行检验,然后,作出接受或拒绝所作假设的决定.,3,其理论背景为实际推断原理，即“小概率原理”,其想法和前面的最大似然类似：如果实际观测到的数据在某假设下不太可能出现,则认为该假设错误。,4,例 1:某产品的出厂检验规定:次品率 p 不超过4%才能出厂.现从一万件产品中任意抽查12件发现3件次品,问该批产品能否出厂？若抽查结果发现1件次品,问能否出厂？,解:先作一个假设。,在H0成立时,我们称H0是原假设或零假设.再作一个备择假设,5,这不是 小概率事件,没理由拒绝原假设。在不准备继续抽样的情况下，作出接受原假设的决定,即该批产品可以出厂.,这是 小概率事件,一般在一次试验中是不会发生的,现一次试验竟然发生,故可认为原假设不成立,即该批产品次品率p0.04,则该批产品不能出厂.,若抽查结果发现1件次品,则在H0成立时,6,例2:一条新建的南北交通干线全长10公里.公路穿过一个隧道(长度忽略不计),隧道南面3.5公里,北面6.5公里.在刚刚通车的一个月中,隧道南发生了3起交通事故,而隧道北没有发生交通事故,能否认为隧道南的路面更容易发生交通事故?,分析:用p表示一起交通事故发生在隧道南的概率.则p=0.35表示隧道南北的路面发生交通事故的可能性相同.p0.35表示隧道南的路面发生交通事故的概率比隧道北的路面发生交通事故的概率大.,-为了作出正确的判断,先作一个假设,7,H0:p=0.35.我们称H0是原假设或零假设.再作一个备择假设 H1:p 0.35.在本问题中,如果判定H0不对,就应当承认H1.,检验:三起交通事故的发生是相互独立的,他们之间没有联系.如果H0为真,则每一起事故发生在隧道南的概率都是0.35,于是这三起交通事故都发生在隧道南的概率是 P=0.353 0.043.这是一个很小的概率,一般不容易发生.,8,所以我们否定H0,认为隧道南的路面发生交通事故的概率比隧道北大.,做出以上结论也有可能犯错误。这是因为当隧道南北的路面发生交通事故的概率相同,而3起交通事故又都出现在隧道南时,我们才犯错误。这一概率正是P=0.043.,于是,我们判断正确的概率是1-0.043=95.7%,9,假设检验中的基本概念和检验思想 根据问题的背景,提出原假设 H0:p=0.35,及其备择假设 H1:p0.35.,(2)在H0 成立的假设下,计算观测数据出现的概率P.,如果P很小(一般用0.05衡量),就应当否定H0,承认 H1;,10,注：为了简便,我们把以上的原假设和备择假设记作 H0:p=0.35 vs H1:p0.35.其中的vs是versus的缩写.,如果P不是很小,也不必急于承认H0,这是因为证据往往还不够充分.如果继续得到的观测数据还不能使得P降低下来,再承认H0不迟.,11,参数检验的一般提法,一般来讲,设X1,X2,Xn是来自总体X的样本,是总体X的未知参数,但是已知 0 1,它们是互不相交的参数集合.对于假设 H0:0 vs H1:1,根据样本，构造一个检验统计量T 和检验法则：若与T的取值有关的一个小概率事件W发生，则否定H0，否则接受H0，而且要求,此时称W为拒绝域，为检验水平。,12,例 3.某厂生产的螺钉,按标准强度为68克/mm2,而实际生产的螺钉强度 X 服从 N(,3.6 2).若 E(X)=68,则认为这批螺钉符合要求,否则认为不符合要求.为此提出如下原假设,H0:=68,和备择假设,问原假设是否正确?,H1:68,现从该厂生产的螺钉中抽取容量为 36 的样本,其样本均值为,13,解：构造检验统计量,又因为 是 的无偏估计。则它偏离68不应该太远,偏离较远是小概率事件。,若原假设H0正确,则,由于,14,如=0.05。确定一个常数 c,使得,则,规定为小概率事件的概率大小,也是显著水平。通常取=0.05,0.01,15,由,于是检验的拒绝域为,现根据样本观测值，,16,解决假设检验的问题时,无论作出否定还是接受原假设H0的决定,都有可能犯错误.我们称否定H0时犯的错误为第一类错误,接受H0时犯的错误为第二类错误.具体如下,(1)H0为真,统计推断的结果否定H0,犯第一类 错误,犯该错误的概率不超过。(2)H0为假,统计推断的结果接受H0,犯第二类 错误，我们记犯该错误的概率为。,假设检验的两类错误,17,H0 为真,H0 为假,正确,正确,第一类错误(弃真),第二类错误(取伪),犯第一类错误的概率通常记为 犯第二类错误的概率通常记为,假设检验的两类错误,18,如在例2中,如果第一起交通事故发生后,就断定隧道南更容易发生交通事故,犯第一类错误的概率是0.35.当第二起交通事故发生后,断定隧道南更容易发生交通事故,犯第一类错误的概率是0.352=0.1225.如果第四起交通事故又发生在隧道南,否定p=0.35时犯第一类错误的概率是0.354=0.015.,19,P(拒绝H0|H0为真),在例3 中,20,在假设检验中，我们希望所用的检验方法尽量少犯错误,但不能完全排除犯错误的可能性.理想的检验方法应使犯两类错误的概率都很小,但在样本的容量给定的情形下,不可能使两者都很小,降低一个,往往使另一个增大.,21,假设检验的指导思想是控制犯第一类错误的概率不超过,然后,若有必要,通过增大样本容量的方法来减少.,因为假设检验一般控制第一类错误的概率在检验水平以下，所以否定H0 时结论比较可靠。如果承认H0，可能犯第二类错误，错误概率可能会比较大。,22,在正确的统计推断前提下,犯错误的原因总是随机因素造成的。要有效减少犯错误的概率,只好增加观测数据，或在可能的情况下提高数据的质量，这相当于降低数据的样本方差.,23,例4：第一类错误与第二类错误的比较 一个有20多年教龄的教师声称他上课从来不“点名”.如何判定他讲的话是真实的?,确立原假设H0:他没有点过名。然后再调查H0是否为真.,当调查了他教过的3个班,都说他没有点过名,这时如果承认H0,犯错误的概率还是较大的.,当调查了他教过的10个班,都说他没有点过名,这时承认H0 犯错误的概率会明显减少。,如果调查了他教过的30个班,都说他没有点过名,这时承认H0犯错误的概率就会很小了。可惜调查30个班是很难做到的！,24,反过来,在调查中只要有人证实这位老师点过名,就可以否定H0了(不论调查了几个班),并且这样做犯错误的概率很小.,例4告诉我们,要否定原假设H0是比较简单的,只要观测到了H0下小概率事件就可以。,要承认H0就比较费力了:必须有足够多的证据(样本量),才能够以较大的概率保证H0的真实.,在这个例子中还有一个现象值得注意:当调查10个班发现都没有点过名就承认H0时,即使判断失误,造成的后果也不严重.因为数据已经说明这位老师不爱点名.,25,假设检验步骤(三部曲),根据实际问题所关心的内容,建立H0与H1。,在H0为真时,选择合适的统计量T,并确定 拒绝域。,根据样本值计算,并作出相应的判断.,26,提出假设,根据统计调查的目的,提出原假设H0 和备择假设H1,作出决策,抽取样本,检验假设,拒绝还是不能拒绝H0,显著性水平,P(T W)=-犯第一类错误的概率，W为拒绝域,总 结,27,8.2 正态均值的假设检验,A.已知 时，的正态检验法,例 5:一台方差是0.8克的自动包装机在流水线上包装净重500克的袋装白糖.现随机抽取了9袋白糖,测得净重如下(单位:克)：499.12 499.48 499.25 499.53 500.82 499.11 498.52 500.01 498.87.能否认为包装机在正常工作?,分析:9袋白糖中有7袋净重少于500克,似乎净重0=500不对.,但是,方差是0.8克,也可能是由于包装机的随机误差导致了以上的数据.,28,解：将包装机包装的袋装白糖的净重视为总体X,则X N(2)，其中2=0.8已知，未知.,在H0下,检验统计量,用Xj表示第 j 袋白糖的净重,则X1,X2,X9是来自总体X的n=9个样本.,提出假设 H0:=0 vs H1:0.,若要求,29,对于标准正态分布，c应为其上/2分位数z/2，于是拒绝域为,本例中，如果取=0.05,则,根据抽样数据，得|z|=1.97时,不该发生的小概率事件发生了,于是否定原假设H0.,30,在例5中，称为检验的显著性水平,简称为显著性水平,检验水平,或水平(level);Z称为检验统计量;|Z|z/2称为检验的拒绝域或否定域;,-由于这种检验方法是基于正态分布的方法,所以又称为正态检验法或Z检验法.,-拒绝域是一个事件,它的发生与否由|Z|,从而由观测样本X1,X2,.,Xn决定.,-如果事件|Z|z/2发生了,就称检验是显著的.这时否定H0,犯第一类错误的概率不超过。,31,在例5中,如果取检验水平=0.04,则临界值z/2=2.054.这时|z|=1.972.054,不能否定H0.,这说明在不同的检验水平下可以得到不同的检验结果.,降低犯第一类错误的概率,就会使得拒绝域减小，从而拒绝H0的机会变小，接受H0的机会变大。,32,假设可以是单侧,也可以是双侧的.,原假设 H0:=68；,备择假设 H1:68,例3中的备择假设是双侧的.某厂生产的螺钉强度 X 服从 N(,3.6 2).如果根据以往的生产情况,按标准强度0=68.现采用了新工艺,关心的是新工艺能否提高螺钉强度,越大越好.此时,可作如下的假设检验:,33,当原假设H0:=0=68 为真时,取较大值的概率较小,当备择假设H1:68 为真时,取较大值的概率较大,给定显著性水平,根据,可确定拒绝域,称这种检验为单边检验.,34,原假设 H0:68,备择假设 H1:68,另外,可设,若原假设H0正确,要求,35,但现不知 的真值，只知 0=68。由于,且,所以，只要取C=z，可得,36,于是,为小概率事件。故取拒绝域为,此时，犯第一类错误的概率。,37,0,0,0,0,0,0,Z 检验法(2 已知),38,在例5中,从实际数据计算得到|z|=1.97.如果拒绝域取成|Z|1.97,则刚刚能够拒 绝H0.这时犯第一类错误的概率是 P=P(|Z|1.97)=0.0488.我们称P=0.0488是检验的P值(P-value).,B.P 值检验法,检验的P值(P-value)是指在H0成立的假设下根据已知观测，H0被拒绝时最小的显著性水平。,39,P值越小,数据提供的否定H0的证据越充分.如果检验的显著性水平是事先给定的,当P值小于等于,就要否定H0.,引入P值，可以使假设检验的结果更有意义。,P值是在H0成立的假设下观测到的样本倾向于 H1的概率。,在例5中,检验法的P值是P=P(|Z|z|)=2(-|z|).,40,C.未知时，均值 的t 检验法,例 6:在例5中如果9个袋装白糖的样品是从超级市场仓库中随机抽样得到的,能否认为这批500克袋装白糖的平均重量是500克?,标准差未知,可用样本标准差S代替.,解:对0=500克,仍作假设 H0:=0 vs H1:0.,41,在H0下,从 7.3节的定理3.6知道检验统计量,说明在H0下,T在0附近取值是正常的,如果|T|取值较大就应当拒绝H0.,根据分位数t/2(n-1)的性质,有 P(|T|t/2(n-1)=.于是H0的显著性水平为的拒绝域是|T|t/2(n-1),42,取=0.05,查表得到t0.05/2(8)=2.306.经过计算得到 S=0.676,|T|=2.609 2.306,所以应当否定H0,认为500.,作出以上判断也有可能犯错误,但是犯错误的概率不超过 0.05.,由于这种检验方法是基于t分布的方法,所以又称为t检验法.,43,设统计量的计算结果为a,则检验法的值为,其中，,44,D.未知时，均值 的单边检验法,例7：在例6中,抽查的9袋白糖的平均重量为499.412克可以引起我们的怀疑.这批袋装白糖的平均重量是否不足呢?,解：为了解决这个问题,我们提出假设 H0:500 vs H1:500 如果否定了H0,就认定这批袋装白糖的份量不足.由于在H0下,不知道 的具体值,所以T的分布是未知的.,45,但是这时有,H0:500 vs H1:500,因为 P(T-t(n-1)P(T0-t(n-1)=,所以可以构造拒绝域为,T-t(n-1),当T-t(n-1),应当否定H0,46,在本例中,查表得到-t0.05(8)=-1.86,T=-2.609-1.86,所以应当否定H0.认定这批袋装白糖的分量不足。这时，犯错误的概率不超过0.05.,由于这种检验方法是基于t分布的方法,所以又称为t 检验法.,本例中,以为检验的拒绝域时,刚刚可以拒绝H0。所以检验的值是 P=P()=0.01560.05.,47,设统计量的计算结果为,则检验法的值为,其中，,48,分析例5和7的问题背景就会看出,在例5中应当作双边检验,因为多装和少装白糖都是不符合生产标准的.,在例7中只需要作单边检验,因为超市只需要知道袋装白糖不缺斤少两就够了.,49,例8.糕点厂经理为判断牛奶供应商所供应的鲜牛奶是否被兑水,对它供应的牛奶进行了随机抽样检查.测得12个鲜牛奶样品的冰点如下,-0.5426,-0.5467,-0.5360,-0.5281-0.5444,-0.5468,-0.5420,-0.5347-0.5468,-0.5496,-0.5410,-0.5405.已知天然牛奶的冰点是-0.545摄氏度.问牛奶是否被兑水.,分析：设 n=12用 表示第 i 个样品的冰点,则 是来自正态总体 的样本,参 数 未知。如果牛奶没有被兑水,那么,50,根据测量的数据可以计算出样本均值 0.5416,样本方差 S=0.0061.由于水的冰点是摄氏度,所以兑水牛奶的冰点将会提高。现在 0.545,于是有理由怀疑牛奶被兑水.,51,检验统计量,解：根据测量的数据可以计算出样本均值 0.5416,样本方差 S=0.0061。设=0.545，作假设,查t分布表得 t0.05(11)=1.796。,所以可以构造拒绝域为,T t(n-1),52,经计算T1.9308 1.796,检验是显著的,所以否定，认为牛奶被兑水。判断牛奶被兑水,犯错误的概率不超过检验水平。,本例中检验的值是,由于这种检验方法是基于t分布的方法,所以又称为t 检验法.,53,设统计量的计算结果为,则检验法的值为,其中，,54,0,0,0,0,0,0,T 检验法(2 未知),55,例9:某厂生产小型马达,其说明书上写着:这种小型马达在正常负载下平均消耗电流不会超过0.8 安培.现随机抽取16台马达试验,求得平均消耗电流为0.92安培,消耗电流的标准差为0.32安培.假设马达所消耗的电流服从正态分布,取显著性水平为=0.05,问根据这个样本,能否否定厂方的断言?,56,分析：由于,可知样本支持,考虑将,作备择假设，以便拒绝原假设,解一：根据题意待检假设可设为,H0:0.8 vs H1:0.8,未知,故选检验统计量:,57,拒绝域为,故接受原假设,即不能否定厂方断言.,H0:0.8 vs H1:0.8,查表得 t0.05(15)=1.753,计算得,58,讨论1：如果从p值来看，即使拒绝原假设，否认厂方断言，犯错误的概率也不超过0.0772。,讨论2：由于根据现有样本，但检验却没有拒绝，这是主要因为样本容量n16还不够大，在水平0.05下现有证据还不足以得出显著性的结论。还需继续抽样。,59,解二 H0:0.8；H1:0.8,检验统计量:,拒绝域为T-t(n-1).查表得 t0.05(15)=1.753,计算得,故接受原假设,即否定厂方断言.,60,由例9可见:对问题的提法不同(把哪个假设作为原假设),统计检验的结果也会不同.,由于假设检验是控制犯第一类错误的概率,使得拒绝原假设 H0 的决策变得比较慎重,也就是H0 得到特别的保护.因而,通常把有把握的,经验的结论作为原假设,或者尽量使后果严重的错误成为第一类错误.,上述两种解法的立场不同，因此得到不同的结论.第一种假设是不轻易否定厂方的结论；第二种假设是不轻易相信厂方的结论.,61,例10:设概率统计考试考生的成绩 XN(2),从中随机地抽取36位考生的成绩，算得平均成绩为66.5分，标准差为15分.问在显著性水平0.05下,是否可以认为这次考试的平均成绩为70分？并给出检验过程.,解:根据题意待检假设可设为,拒绝域为,检验统计量,62,故接受H0,即认为这次考试的平均成绩为70分.,经计算,注意：如果接受平均成绩为70分，那么犯第二类错误的概率可能很大。,63,作业:8.3;8.6;8.21,