空间数据的统计分析-3-本.ppt
《空间数据的统计分析-3-本.ppt》由会员分享,可在线阅读,更多相关《空间数据的统计分析-3-本.ppt(141页珍藏版)》请在三一办公上搜索。
1、第七章 空间数据的统计分析方法(3),武汉大学遥感信息工程学院遥感科学与技术本科生教案(2012),秦 昆,2,地统计分析概述空间变异函数克里金估计方法地统计分析研究展望ArcGIS的地统计分析工具,主要内容,3,地统计分析概述,4,20世纪50年代,南非采矿工程师Daniel Krige总结多年金矿勘探经验,提出根据样品点的空间位置和样品点之间空间相关程度的不同,对每个样品观测值赋予一定的权重,进行移动加权平均,估计被样品点包围的未知点矿产储量,形成了克里金估计方法(kriging)的雏形。20世纪60年代初期,法国地质数学家Georges Matheron提出数学形式的区域化变量,严格地给
2、出了基本变异函数(variogram)的定义和一般克里金估计方法。通过对变异函数、克里金估计以及随机模拟方法的深入扩展,地统计学(Geostatistics)已经成为空间统计学的核心内容,其理论体系的深度和方法扩展宽度是其它空间统计方法无法比拟的。,地统计分析概述(Geostatistics),5,国内的地统计工作主要集中于地质勘探建模和地理(环境)空间数据分析应用方面。国际上,地统计不仅是地质领域数学地质的主要分支,同时也逐渐成为数学领域应用统计的一个新分支。地统计学(Geostatistics),也称为地质统计学,是一门以区域化变量理论为基础,以变异函数为主要工具,研究那些分布于空间上既有
3、随机性又有结构性的自然或社会现象的科学。主要包括:区域化变量的变异函数模型、克里金估计和随机模拟三个主要内容。相对于物理机制建模,地统计是一种分析空间位置(空间结构)相关地学信息的经验性方法(赵鹏大,2004)。,地统计分析概述,6,地理信息是地理空间位置相关的信息。地理信息科学是一门研究地理信息获取、处理和利用中的基本规律的科学,与地统计学存在本质联系。地统计学和地理信息科学存在重叠的研究对象,即地理空间相关信息。地统计学遵从相近相似规律(空间位置相近的地学现象具有相似属性值),这与地理信息分析中的地理学第一定律(空间相近的地理现象比空间远离的地理现象具有更强的相关性)完全一致。地统计学和地
4、理学第一定律同在20世纪60年代被独立提出。,地统计分析概述,7,尽管地理信息系统中还存在空间自回归模型(空间滞后模型和空间误差模型)、地理加权回归和各种空间结构(空间分布)探索等空间统计分析方法,但是地统计一直是理论基础最为完善且应用扩展最为广泛的主流空间统计方法,地统计学已经成为地理信息科学中地理信息处理和分析的重要理论,地统计分析功能被直接嵌入或平行连接到地理空间或遥感影像信息系统中。,地统计分析概述,8,地统计具有不同于传统统计的两个显著特点:1)样本点的空间相关性。传统统计中不同样本点仅具有随机性,样本点之间保持空间独立性。然而,地统计中样本点不仅具有随机性,同时样本点之间具有空间相
5、关性。2)一次性样本采集。传统统计分析同一空间位置处可以多次采样数据。实际地统计分析中,样本区域中每一个空间位置多为一次采样数据。根据传统统计学,一次采样数据中无法推断出总体规律。这两个特点导致了地统计中描述空间相关性(空间结构)的变异函数和克服一次采样局限的平稳性假设的提出。有时候,区域化变量的空间相关(不同空间位置变量的相关)也称为空间自相关,区域化变量的协方差(不同空间位置变量的相关)也称为空间自协方差。,地统计分析概述,9,空间变异函数,10,区域化变量的定义和平稳性假设,当空间被赋予地学含义时,地学工作者习惯称其为区域。发现地表空间的区域差异正是地理学研究的基本任务。当一个专题变量分
6、布于空间,呈现一定的结构性和随机性时,在地统计学上称之为“区域化”,区域化变量(regionalized variable)描述的现象为区域化现象。,空间变异函数,变异函数(区域化变量的定义和平稳性假设),定义:设Z(x)为一随机变量,表示在空间位置x处专题变量取值是随机的,区域化变量是区域化随机变量的简称。Z(X)=Z(x),xX表示区域X中所有空间位置x处随机变量Z(x)的集合(簇),又称为随机场,随机场也可看作若干空间样本(空间函数)的集合。,11,12,区域化变量即空间位置相关的随机变量。区域化变量为具有内在空间结构的随机变量,它是随机场的简化。随着抽象层次的提升或观察尺度的加大,一个
7、复杂结构的空间单元逐步简化为一个简单的空间位置点。区域化变量理论重点研究区域化随机变量的各种空间结构和统计性质,变异函数是描述区域化随机变量空间结构的有效数学工具,克里金估计利用区域化变量结构性质进行估值应用。估计是数据处理的一种泛称。在时间域,服务于不同目的估计分别称为滤波(除去噪音)、平滑(找出趋势)和预测(计算未来值)。在空间域,估计可以分为内插(计算研究区域内的未知值)和外推(计算研究区域外的未知值,又称为预测)。克里金插值和克里金预测统称为克里金估计。揭示区域化变量空间结构和统计性质的理论,简称为区域化变量理论,构成了地统计学的基础。,变异函数(区域化变量的定义和平稳性假设),地统计
8、中的数据多为区域中每个空间位置的一次采样数据。通常,为了满足总体规律推断中多个样本(大样本)的数据要求,地统计中使用平稳(second-order stationary)或内蕴(intrinsic stationary)假设下多个空间位置采样数据(每个位置依然是一次采样数据)来替代单个位置上的多次采样数据(传统统计的采样数据)。机理上,相近相似规律的普适性、空间结构的稳定性、地学现象空间结构形成的驱动(动力)因素的不变性等表明了平稳性假设的现实合理性。,13,变异函数(区域化变量的定义和平稳性假设),变异函数(区域化变量的定义和平稳性假设),存在n个随机变量的联合分布F(Z(x1),Z(x2)
9、,Z(xn),严格的平稳性指随机变量联合分布的空间位移不变性,即:F(Z(x1),Z(x2),Z(xn)=F(Z(x1+h),Z(x2+h),Z(xn+h)实际应用中,满足这种位移不变的联合概率分布的区域化随机变量较少见,而且严格平稳性的验证非常困难。相比较,容易满足和验证的是分布参数(矩)的平稳性,即弱平稳性假设。常用的弱平稳性假设包括二阶平稳性和内蕴性假设。二阶平稳性是比内蕴性更严格的若(弱)平稳性假设。,14,变异函数(区域化变量的定义和平稳性假设),定义:如果区域化变量Z(x)满足下列两个条件,则称其满足二阶平稳性假设。(1)在研究范围内,区域化变量Z(x)的期望存在且为常数,即 EZ
10、(x)=m(2)在研究范围内,区域化变量Z(x)的协方差函数存在且为空间滞后h的函数,与空间位置x无关,即 CovZ(x),Z(x+h)=EZ(x+h)-mZ(x)-m=EZ(x+h)Z(x)-m2=C(h)当h=0时,条件(2)说明了方差函数存在且为常数,VarZ(x)=CovZ(x),Z(x)=EZ(x)-m2=C(0),15,变异函数(区域化变量的定义和平稳性假设),二阶平稳性假设中要求区域化变量的期望、协方差和方差都存在,实际中区域化变量的先验期望可能不存在,但是变异函数存在。定义在区域化变量相对增量上的变异函数具有比定义在区域化变量绝对值上的协方差函数的条件更加宽松,变异函数的计算比
11、协方差函数的计算更加容易。协方差函数和变异函数为空间结构的对偶描述方式。对于区域化变量,协方差函数从相似角度来描述空间结构,变异函数则从差异角度描述空间结构。,16,变异函数(区域化变量的定义和平稳性假设),定义:如果区域化变量Z(x)满足下列两个条件,则称其满足内蕴性假设。(1)在研究范围内,区域化变量Z(x)增量的期望为零,即EZ(x+h)-Z(x)=0(2)在研究范围内,区域化变量Z(x)增量的方差存在且为空间滞后h的函数,与空间位置x无关,即 VarZ(x+h)-Z(x)=EZ(x+h)-Z(x)-EZ(x+h)-Z(x)2=EZ(x+h)-Z(x)2=2(h)这里,(h)表示区域化变
12、量的变异函数或半方差函数。有些文献也将(h)称为半变异函数或半变差函数。可以看出,区域化变量增量的计算避免了期望的直接计算。变异函数对区域化变量的期望的存在没有直接要求。,17,变异函数的定义和非负定性条件,定义:变异函数是区域化变量空间结构的一种形式化表达,数学表示为两个随机变量Z(x)和Z(x+h)之间增量的方差的一半,,18,19,进一步表达式变换为:,变异函数的定义和非负定性条件,以上协方差函数和变异函数关系式更加清晰地表明,协方差函数和变异函数为空间结构的对偶描述方式。对于区域化变量,协方差函数从相似角度来描述空间结构,变异函数则从差异角度描述空间结构。二阶平稳性假设下,协方差函数和
13、变异函数存在相互转换关系。,20,变异函数的定义和非负定性条件,在协方差函数和变异函数中,如果空间滞后h以极坐标参考系中的矢量表示,则该滞后矢量有模和方向两个特征量。当协方差函数和变异函数仅为模值|h|的函数时,称其为各向同性协方差函数和变异函数。否则,当协方差函数和变异函数同时为模值|h|和方向的函数时,称其为各向异性协方差函数和变异函数。各向同性为各向异性的特例。协方差函数和变异函数的各向异性可以分解为几何各向异性和带状各向异性。基台相同,变程随方向不同的各向异性称为几何各向异性。不能通过伸缩比例变换为各向同性的各向异性称为带状各向异性。,21,变异函数的定义和非负定性条件,通常,把360
14、度方向离散划分为几个大的方向组,在某一角度区间范围(角度容许范围)内不同方向的样本点(对)都用来计算该区间中心方向的变异函数值。类似地,可以进行空间滞后距离分组,在某一距离区间范围(距离容许范围)内,不同距离的样本点(对)都用来计算该区间中心距离的变异函数值。,22,变异函数的定义和非负定性条件,23,变异函数的定义和非负定性条件,变异函数模型拟合及其评价,理想上,变异函数值随着空间滞后h的增大而单调增加。,24,一种典型变异函数曲线(variography),图中的变异函数(h)具有三个参数a,C0,C0+C。a称为变程,是变异函数达到基台值时的空间滞后h,反映了数据空间自相关的最大距离。C
15、0称为块金值,是空间滞后为0时的变异函数值,为测量误差和低于采样间距的随机变异的综合反映。当空间滞后h超过变程a时,变异函数(h)在一个极限值()附近摆动,这个极限值称为基台值C+C0。,通常,一个区域化变量的取值z由大尺度趋势、微尺度空间相关变异r和纯随机变异三部分构成,即z=+r+。期望(或平均值)即是一种趋势表示。微尺度空间相关变异r为去除趋势后具有内在空间(自)相关性的残余值纯随机变异为不存在空间(自)相关性的独立噪声(如测量误差)。测量误差和采样间距(采样尺度)以下的微尺度空间相关残余值一起构成金块值C0。采样间距(采样尺度)以上的微尺度空间相关残余值的变异函数值为C。,25,变异函
16、数模型拟合及其评价,按照二阶平稳性或内蕴平稳性假设下的变异函数表达式(h),计算h=0时的变异函数值应该为0,表示同一位置点的样本值没有差异,然而,这种(0)=0的情形是在没有测量误差和采样间距(采样尺度)以下空间(自)相关变异的理想结果。实际应用中,测量误差总是无法避免,采样间距总是掩盖了一些更小尺度的空间变异。尽管带有块金值的变异函数模型失去了理想变异函数模型在原点处的连续性,但是该模型合理地模拟了实际变异(测量误差和小于采样间距尺度下的空间变异),所以能更好地提高后续克里金估计的精度。,26,变异函数模型拟合及其评价,理论变异函数模型的构建是一项基础性研究,原则上满足条件非负定性(或非负
17、定性)的函数都可以作为候选的有效变异函数(有效协方差函数)。多年的研究和实践中,人们发展了一些标准的理论变异函数模型。通过计算样本数据中不同空间滞后h上的变异函数值,对若干空间滞后h及其相应的变异函数值(经验变异函数模型)进行选定理论变异函数模型的拟合,确定理论模型中的参数值,最终获取确定的变异函数模型。在经验变异函数值到理论变异函数模型的拟合中,首先将理论变异函数模型通过变量代换建立对应的多项式回归方程,使用最小二乘法等方法进行最优参数估计,把解出的多项式回归方程系数通过逆代换获得变异函数拟合模型的参数值。,27,变异函数模型拟合及其评价,28,变异函数模型拟合及其评价,29,变异函数模型拟
18、合及其评价,30,理论变异函数模型对样本数据的拟合中,样本数据容量有限性和关系复杂性与理论模型高度简化性等要求我们对求得的回归模型的显著性进行检验,对不同理论模型拟合质量进行评价。最小二乘法原理求解回归方程系数时要求数据点和回归曲线之间的残差平方和最小。,变异函数模型拟合及其评价,31,变异函数模型拟合及其评价,总离差平方和一定时,回归平方和越大,残差平方和就越小,判定系数就越大。判定系数的取值范围为0R21。当全部观测值都位于回归曲线上时,SSE=0,则R2=1,说明总离差完全可以由所估计的样本曲线来解释。如果回归曲线不能解释任何离差,模型中自变量与因变量线性无关,y的总离差全部归于残差,即
19、SSE=SST,则R2=0。,32,变异函数模型拟合及其评价,33,临界值Faf是显著水平a(如0.05或0.01)与自由度f的函数,若计算的F值大于临界值Faf,判定系数R2是有意义的,表明该回归模型(理论曲线)拟合度较高,可以采用该回归模型作为理论曲线模型对数据进行有效拟合。反之,该回归模型没有实际价值。,变异函数模型拟合及其评价,理论变异函数模型,一般的理论变异函数模型可以划分为三类:1)有基台值模型,包括球状模型、指数模型、高斯模型、有基台线性模型和纯块金效应模型等;2)无基台值模型,包括幂函数模型、无基台线性模型和对数模型等;3)孔穴效应模型。每个理论变异函数模型都有其数学表达式,可
20、以推导出对应的参数(变程、块金值、基台值)。,34,下面列出球状、指数、高斯、有基台线性、纯块金效应、幂函数、无基台线性、对数和孔穴效应变异函数模型的数学表达式。,35,理论变异函数模型,36,理论变异函数模型,37,根据二阶平稳性或内蕴性假设下理想变异函数定义,在原点处的变异函数值为零,没有突然的变异(块金值),区域化变量的空间连续性(光滑性)较好。变异函数作为区域化变量增量的方差的一半(增量的半方差),可以视为均方意义下空间连续性的表达模型。原点附近的变异函数值对应很小的空间滞后h,小空间滞后的样本点对待估点值的影响更大。,理论变异函数模型,例如,假设某地区降水量Z(x)(单位:mm)是二
21、维区域化随机变量,满足二阶平稳假设,其观测值的空间正方形网格数据如下所示(点与点之间距离为h=1km),试计算其南北方向变异函数。,从图可以看出,空间上有些点,由于某种原因没有采集到。如果没有缺失值,可直接对正方形网格数据结构计算变异函数;在有缺失值的情况下,也可以计算变异函数,只要“跳过”缺失点位置即可(见下图,缺失值情况下样本数对的组成和计算过程,为缺失值)。,38,=385/72=5.35,计算南北方向上的变异函数值,由变异函数的计算公式可得:,同样计算出南北方向上的变异函数:,39,例如,某地区降水量是一个区域化变量,其变异函数 的实测值及距离h的关系见下表,下面我们试用回归分析方法建
22、立其球状变异函数模型。,球状变异函数的形式为:,当 时,有,40,进一步,代换计算可知:c0=2.048,c=1.154,a=8.353,所以,球状变异函数模型为:,如果记,则可以得到线性模型:根据表中的数据,对上式进行最小二乘拟合,得到:计算可知,上式的显著性检验参数F=114.054,R2=0.962,可见模型的拟合效果是很好的。,41,理论变异函数模型,克里金估计方法,42,按照估值单元的大小划分,存在点估值和块段估值。块段的值可以通过赋予块段平均值给块段中心点来转化为点估值。或者,把块段离散为若干点的集合,从而转化为点估值。点克里金估计方法:从不同角度利用区域化变量的结构性质,发展了不
23、同类型的克里金估计方法,包括区域化变量满足二阶平稳性(或内蕴性)假设的普通克里金估计和简单克里金估计,区域化变量非平稳(存在漂移)的泛克里金估计,多个变量的协同克里金估计,变量服从对数正态分布的对数克里金估计,适用于非连续取值(包括名义数据)的指示克里金估计、析取克里金估计和概率克里金估计等。此外,可以综合多个角度,全面利用区域化变量的结构性质,对单个特性建模的克里金估计进行组合,形成普通协同克里金估计、协同泛克里金估计和协同指示克里金估计等方法。,43,克里金估计方法,克里金估计(普通克里金估计),普通克里金估计是一种内蕴假设(或二阶平稳假设)下期望未知的区域化变量估值方法。这里,区域化变量
24、值Z(x)由期望m和残余Y(x)两部分构成,即Z(x)=m+Y(x),期望m为未知,残余Y(x)的期望为零,EY(x)=0。区域化变量Z(x)或残余Y(x)的内蕴假设为:普通克里金估计方法的估计公式为,Z*(x0)是待估位置x0的估值,Z(xi)是已知位置xi的观测值,i是分配给Z(xi)的权重,n是估计使用的观测值个数。,44,45,普通克里金估计方法的最优估计条件为估计误差方差最小。根据估计公式并结合无偏估计条件,化简估计误差的方差表达式,获得:,引入拉格朗日乘数-2,将条件(无偏估计条件)极值(估计方差最小,)问题化为下列无条件表达式的极值问题求解:,46,克里金估计(普通克里金估计),
25、上述方程组求解出的权重系数可以代入普通克里金估计方法估计公式进行待估点的估值。利用上面的普通克里金方程组,简化的估计方差表达式,获得:,47,48,克里金估计(普通克里金估计),克里金估计(泛克里金估计),泛克里金估计中,区域化变量值Z(x)由期望m(x)和残余Y(x)两部分构成,即:,其中,期望m(x)代表趋势项(又称为漂移),随空间位置变化,残余Y(x)具有内蕴性(或二阶平稳性)且期望为零,即EY(x)=0。,49,例如,一维空间中,线性趋势的m(x)=a0+a1x;二次曲线趋势的m(x)=a0+a1x+a2x2。二维空间中,线性趋势的m(x,y)=a0+a1x+a2y;二次曲线趋势的m(
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 空间 数据 统计分析
![提示](https://www.31ppt.com/images/bang_tan.gif)
链接地址:https://www.31ppt.com/p-6328217.html