数理统计与随机过程ch.ppt
《数理统计与随机过程ch.ppt》由会员分享,可在线阅读,更多相关《数理统计与随机过程ch.ppt(69页珍藏版)》请在三一办公上搜索。
1、,数理统计与随机过程第十章,主讲教师:程维虎教授,北京工业大学应用数理学院,什么是“随机过程”?,确定性过程:事物的变化过程可以用一个时间t的确定函数来描述。比如:物体的自由落体过程。不确定过程:没有确定的变化规律,即这类事物的变化过程不能用一个时间t的确定性函数来描述。如果对该事物的变化全过程进行一次观测,可得到一个时间t的函数,但是若对该事物的变化过程重复的独立的进行多次观测,则每次得到的结果是不同的。从另一个角度来看,如果固定某一个观测时刻t,事物在时刻t出现的状态是随机的。,例1电话问题:我们用X(t)表示在时刻t前电话局接到的呼唤次数。如果固定时间t,则X(t)是一个随机变量;但是t
2、是可变参数,是一个连续变量,所以X(t)是一个过程。因此,这个问题所涉及的不仅是一个随机变量的问题,它是随机的,又是一个过程。,例2液面上质点的运动:我观测液面上一个做布朗运动的质点A,若用X(t),Y(t)表示在时刻t该质点在液面上的坐标位置。当t固定时,X(t),Y(t)是一对二维随机变量。而t是一个连续变量,因此X(t),Y(t)又是一个过程。,例3 热噪声电压:电子元件或器件由于内部微观粒子(如电子)的随机运动所引起的端电压称为热噪声电压,它在任一确定时刻 t 的值都是一随机变量,记为V(t)。不同时刻对应不同的随机变量。当时间在某个区间,如0,)上变化时,热噪声电压表现为一族随机变量
3、,记为 V(t),t0。,在无线电通讯技术中,接收机在接收信号时,机内的热噪声电压要对信号产生持续的干扰,为消除这种干扰,就必须掌握热噪声电压随时间变化的过程。为此,我们通过某种装置对元件(或器件)两端的热噪声电压进行长时间的测量,并把结果自动记录下来。,作一次试验(测量一此长时间内的热噪声电压),得到一个电压时间函数v1(t),t 0(如图10-1)。这个电压时间函数在试验前是不可能预先确知的,只有通过测量才能得到。,图10-1,如果在相同条件下独立地再进行一次测量,得到的记录可能是不同的。,事实上,在相同条件下每次测量都将产生不同的电压时间函数。这样,不断独立地一次次重复测量,就得到一族不
4、同的电压时间函数,这族函数从另一角度规划了热噪声电压。,图10-1,随机过程:依赖于一个变动参量的一族随机变量。设 T 是一个无限实数集。我们把依赖于参数 t T 的一族(无限多个)随机变量收集在一起,称为随机过程,记成 X(t),t T。这里,对每一个t T,X(t)都是一个随机变量。T 称为参数集。常把 t 看作为时间,称 X(t)为 t 时刻 过程的状态,称 X(t1)x(实数)为t t1 时过程处于状态 x。对于一切 t,X(t)所有可能取得一切值的全体称为随机过程的状态空间。,对随机过程 X(t),t T 进行一次试验(即在 T上进行一次全程观测),其结果是 t 的函数,记为x(t)
5、,tT,称它为随机过程的一个样本函数或样本曲线。所有不同的试验结果构成一族(可以只包括有限个,如本节例1)样本函数。随机过程可以看作是多维随机变量的延伸。随机过程与其样本函数的关系就像数理统计中总体与样本的关系一样。依照上面的说法,热噪声电压的变化过程(t),t是一随机过程,它的状态空间是(-,+),一次观测到的电压时间函数就是这个随机过程的一个样本函数。,在以后的叙述中,为简便起见:常以 X(t),t 表示随机过程。在上下文不致混淆的情形下,一般略去记号中的参数集 T。,例1 抛一枚硬币试验,样本空间是 S=H,T,定义,其中 P(H)=P(T)=1/2。对任意固定的 t,X(t)是一定义在
6、S上的随机变量;对不同的 t,X(t)是不同的随机变量(见图10-2),所以 X(t),t(-,+)是一族随机变量,即是随机过程。,作一次试验,若出现H,样本函数 x1(t)=cos t;若出现T,样本函数 x2(t)=t。故,随机过程对应的一族样本函数仅包含两个函数:cos t,t。显然,这个随机过程的状态空间为(-,+)。,图10-2,例2 考虑 式中,是正常数,是在(0,2)上服从均匀分布的随机变量。显然,对任一固定的时刻 t1,X(t1)=cos(t1+)是一个随机变量。因而,由(1.1)式确定的 X(t)是一随机过程,通常称它为随机相位正弦波。其状态空间是-,。在(0,2)内随机地取
7、一数 i,相应的样本函数是 图10-3中画出了这个随机过程的两条样本曲线。,图10-3,例3 在测量运动目标的距离时,存在随机误差。若以(t)表示在时刻 t 的测量误差,则它是一个随机变量。当目标随时间 t 按一定规律运动时,测量误差(t)也随时间 t 而变化。换句话说,(t)是依赖于 t 的一族随机变量,亦即(t),t0是一随机过程,状态空间是(-,+)。,例4 设某市120急救电话台不断地接到用户的呼叫,若以X(t)表示时间间隔(0,t内接到的呼叫次数,则它是一个随机变量,且对不同的 t0,X(t)可能是不同的随机变量。故,X(t),t 是一随机过程,状态空间是0,1,2,。例5 考虑掷一
8、颗骰子试验。(1).设Xn是第 n 次(n1)掷的点数,对于n=1,2,的 不同值,Xn是不同的随机变量,因而Xn,n1 构成一随机过程,称为伯努力过程,或伯努力随 机序列。状态空间都是1,2,3,4,5,6。(2).设Xn是前n次掷出的最大点数,则Xn,n 1也 是一随机过程。状态空间是1,2,3,4,5,6。,随机过程可依其在任意时刻的状态是连续型随机变量或离散型随机变量而分成连续型随机过程或离散型随机过程。热噪声电压、例2和例3是连续型随机过程,例1,例4和例5是离散型随机过程。随机过程还可依时间(参数)是连续或离散进行分类。当时间集T是有限或无限区间时,称X(t),t T为连续参数随机
9、过程(以下如无特别指明,随机过程总是指连续参数而言的);如果T是离散集合,例如T=0,1,2,,则称X(t),tT为离散参数随机过程或随机序列,此时常记成 Xn,n=0,1,2,等,如例5。,有时,为了适应数字化的需要,实际中也常将连续参数随机过程转化为随机序列处理。例如,我们只在时间集T=t,2t,nt,上观察电阻的热噪声电压(t),这时就得到一个随机序列V1,V2,Vn,,其中Vn=V(nt)。显然,当t充分小时,这个随机序列能够近似地描述连续时间情况下的热噪声电压。需注意的是:参数 t 虽然通常解释为时间,但它也可以表示其它的量。诸如:序号、距离等。如例5中,假定每隔一个单位时间掷一次骰
10、子,则第n次掷出的点数 Xn就相当于 t=n时骰子出现的点数。,10.2 随机过程的统计描述,随机过程在任一时刻的状态是随机变量,由此可以利用随机变量(一维或多维)的统计描述方法来描述随机过程的统计特征。,10.2.1 随机过程的分布函数族,给定随机过程 X(t),t T,对每个固定的 t T,随机变量 X(t)的分布函数一般与 t 有关,记为,称其为随机过程 X(t),t T 的一维分布函数,称Fx(x,t),t T为一维分布函数族。,一维分布函数族刻画了随机过程在各个时刻的统计特征。为描述随机过程在不同时刻状态之间的相关关系,一般要对任意 n个(n=2,3,)不同时刻t1,t2,tnT,引
11、入 n 维随机变量(X(t1),X(t2),X(tn),其联合分布函数记为,对固定的n,称FX(x1,x2,xn;t1,t2,tn),tiT为随机过程X(t),t T的 n 维分布函数族。,当n充分大时,n 维分布函数族能近似地描述随机过程的统计特征。显然,n 取得愈大,则n维分布函数族描述随机过程的特征也愈趋于完善。一般地,可以指出(科尔莫戈罗夫定理):有限维分布函数族,即FX(x1,x2,xn;t1,t2,tn),n=1,2,tiT完全地确定了随机过程的统计特征。,上一节,我们曾将随机过程按其状态或时间的连续或离散进行了分类。然而,随机过程本质的分类方法乃是按其分布特征进行分类的。具体地说
12、:就是依照过程在不同时刻的状态之间的特殊统计依赖方式,抽象出一些不同类型的模型。如:独立增量过程、马尔可夫过程、平稳过程等。我们将在以后的章节中对它们作不同程度的介绍。,10.2.2 随机过程的数字特征,随机过程的分布函数族能完善地刻画随机过程的统计特征。但是,人们在实际中,根据观察往往只能得到随机过程的部分资料(样本),用它来确定有限维分布函数族是困难的,甚至是不可能的。因而,像引入随机变量的数字特征那样,有必要引入随机过程的基本数字特征均值函数和相关函数等。这些数字特征在一定条件下是便于测量的。,给定随机过程 X(t),t T,固定 t T,X(t)是一随机变量,它的均值一般与 t 有关,
13、记为,称 X(t)为随机过程X(t),t T的均值函数。注意,X(t)是随机过程的所有样本函数在时刻 t 的函数值的平均,通常称这种平均为集平均或统计平均,以区分第十二章中引入的时间平均概念。,均值函数X(t)表示了随机过程 X(t)在各个时刻的摆动中心,如图10-4所示。,其次,把随机变量X(t)的二阶原点矩和二阶中心矩分别记作,并分别称它们为随机过程X(t),t T的均方值函数和方差函数。方差函数的算术平方根 X(t)称为随机过程的标准差函数,它表示随机过程X(t)在时刻 t 对于均值X(t)的平均偏离程度。见图10-4。,又,对任意 t1,t2T,把随机变量X(t1)和X(t2)的二阶原
14、点混合矩记作,并称它为随机过程X(t),t T的自相关函数,简称相关函数。记号RXX(t1,t2)在不致混淆时,常简记成RX(t1,t2)。,类似地,将X(t1)和X(t2)的二阶混合中心矩记成,并称为随机过程X(t),t T的自协方差函数,简称协方差函数。CXX(t1,t2)也常简记为CX(t1,t2)。,由多维随机变量数字特征的知识可知,自相关函数和自协方差函数是可划随机过程自身在两个不同时刻的状态之间统计依赖关系的数字特征。现把(2.1)(2.5)式定义的诸数字特征之间的关系简述如下:由(2.2)和(2.4)式知,由(2.5)式展开,得,特别地,当t1=t2=t时,由(2.7)式,得,由
15、(2.6)(2.8)式可知,以上诸数字特征中最主要的是均值函数和自相关函数。从理论的角度来看,仅仅研究均值函数和自相关函数当然是不能代替对整个随机过程的研究的,但是由于它们确实刻画了随机过程的主要统计特征,而且远较有限维分布函数族易于观察和实际计算,因而对于应用课题而言,它们常常能够起到重要作用。据此,在随机过程的专著中都着重研究了所谓二阶矩过程。随机过程X(t),t T,如果对于每一个t T,二阶矩EX2(t)都存在,那么称它为二阶矩过程。,二阶矩过程的相关函数总存在。事实上,由于EX2(t1),EX2(t2)存在,根据柯西施瓦兹不等式(参见第四章习题33),有,即知:RX(t1,t2)=E
16、X(t1)X(t2)存在。在实际中,常遇到一种特殊的二阶矩过程正态过程。随机过程X(t),t T称为正态过程,如果对任意 n1及任意 t1,t2,tnT,(X(t1),X(t2),X(tn)服从 n 维正态分布。由第四章3、4知,正态过程的全部统计特征完全由它的均值函数和自协方差函数(或自相关函数)所确定。,例1 设A,B是两个随机变量,求随机过程X(t)=At+B,t T=(-,+)的均值函数和自相关函数。如果A,B相互独立,且 AN(0,1),BU(0,2),问 X(t)的均值函数和自相关函数又是怎样的?解 X(t)的均值函数和自相关函数分别为,当AN(0,1)时,EA=0,EA2=1;当
17、BU(0,2)时,EB=1,EB2=4/3;又因A、B独立时,有EAB=EAEB=0。故,例2 求10.1例2中随机相位正弦波的均值函数、方差函数和自相关函数。,由定义,得,解 由假设,知的概率密度为,自相关函数,特别地,令t1=t2=t,即得方差函数,其中=t2-t1。,例3 设 X(t)=Acos t+Bsin t,tT=(-,+),其中A,B相互独立,且均是服从正态分布N(0,2)的随机变量,是实常数。证明:X(t)是正态过程,并求其均值函数和自相关函数。解 由题设,A,B是相互独立的正态变量,所以(A,B)是二维正态变量。对任意一组实数t1,t2,tnT,X(ti)=Acosti+Bs
18、inti,i=1,2,n都是A,B的线性组合。于是,根据第四章4,n维正态变量的性质3。,(X(t1),X(t2),X(tn)是n维正态变量。因为n,ti是任意的,由定义,X(t)是正态过程。,另由题设,有E(A)=E(B)=E(AB)=0,E(A2)=E(B2)=2.由此,可算得X(t)的均值函数和自协方差函数(或自相关函数)分别为:X(t)=EAcost+Bsint=0,CX(t1,t2)=RX(t1,t2)=E(Acost1+Bsint1)(Acost2+Bsint2)=(cos t1 cos t2)E(A2)+(sin t1 sin t2)E(B2)+(cos t1 sin t2+si
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 数理统计 随机 过程 ch
链接地址:https://www.31ppt.com/p-5092756.html