空间信息系统原理.ppt
《空间信息系统原理.ppt》由会员分享,可在线阅读,更多相关《空间信息系统原理.ppt(56页珍藏版)》请在三一办公上搜索。
1、空间数据仓库和数据挖掘 1.数据仓库和空间数据仓库 2.空间信息基础设施 3.数据挖掘和空间数据挖掘,1数据仓库和空间数据仓库,11 数据仓库111 数据仓库产生趋势112 数据仓库概念1.1.3 数据仓库特点114 数据仓库应用,12 空间数据仓库121 空间数据仓库产生趋势122 空间数据仓库的概念和内涵123 空间数据仓库的体系结构125 空间数据仓库的关键技术126 国内外研究现状127 空间数据仓库目前主要研究内容128 OLAP129 空间数据仓库系统1210 GIS中使用空间数据仓库的优势1211 开发空间数据仓库应注意的问题,111 数据仓库产生趋势,随着市场竞争的加剧和信息社
2、会需求的发展,出现了数据集中化、业务综合化、管理扁平化、决策科学化的趋势。伴随这种数据信息化的趋势,从大量数据中提取(检索、查询等)制定市场策略的信息就显得越来越重要了。这种需求既要求联机服务,又涉及大量用于决策的数据,而传统的数据库系统已无法满足这种需求。其具体体现在三个方面:历史数据量很大;辅助决策信息涉及许多部门的数据,而不同系统的数据难以集成;由于访问数据的能力不足,它对大量数据的访问性能明显下降。,随着C/S技术的成熟和并行数据库的发展,信息处理技术的发展趋势是从大量的事务数据库中抽取数据,并将其清理、转换为新的存储格式,即为决策目标把数据聚合在一种特殊的格式中。随着此过程的发展和完
3、善,这种支持决策的、特殊的数据存储即被称为数据仓库(Data Warehouse,DW)。,111 数据仓库产生趋势,112 数据仓库定义,W.H.Inmon对数据仓库的定义为数据仓库(Data Warehouse,简称DW)是支持管理决策过程的、面向主题的、集成的、稳定的、不同时间的数据集合。主题是数据归类的标准,每个主题对应一个客观分析领域,如客户、商店等,它可为辅助决策集成多个部门不同系统的大量数据。数据仓库包含了大量的历史数据,经集成后进入数据仓库的数据是极少更新的。数据仓库内的数据时限为5年至10年,主要用于进行时间趋势分析。数据仓库的数据量很大,一般为10GB左右。它是一般数据库(
4、100MB)数据量的100倍,大型数据仓库达到TB级。,113 数据仓库特点,数据仓库是一种分析型环境,它与一般的DBMS的操作型环境是不同的,两者的比较有利于对数据仓库的理解。,CSDS&SDLC,114 数据仓库应用,数据仓库主要应用在两个方面:使用浏览分析工具在DW中寻找有用的信息。数据仓库系统支持在DW上的应用,形成决策支持系统(DSS)。,121 空间数据仓库产生趋势,地球是一个复杂、多变的系统,传统地学的各个学科由于其自身的局限,其研究范围已无法适应全球变化和区域可持续发展的要求。如在交通规划中,往往需要使用大量历史的、现实的空间数据以及各应用领域的复杂数据进行数据分析,涉及多维数
5、据视图的概念,仅靠关系数据库就将难以解决。同时,传统的GIS应用系统是面向应用、事务驱动的,其中分析所需要的主题相当分散,不同的操作平台和数据标准使得决策支持系统几乎无法实现数据共享。为此,必须通过大型的、多维化的数据库系统进行统一的组织、管理。,121 空间数据仓库产生趋势,数据仓库正是这样一种数据的存储系统,它提供了来自异地、异构、种类不同的应用系统的集成化和历史化的数据。对其加工后,在数据仓库中存储、提取和维护,灵活地重组数据,呈现出多维数据视图,并且面向复杂的数据分析及高层的决策支持,从而为有关部门或企业进行全局范围的多维分析、战略决策和长期趋势分析提供了有效的支持。由于空间数据的特殊
6、性,空间数据仓库在数据仓库的基础上需引入空间维数据,根据主题从不同的GIS应用系统中截取从瞬态到区段直至全球系统上的信息,从而为交通规划的制定、可持续发展战略的研究提供最好的信息服务。,122 空间数据仓库的概念和内涵,空间数据仓库(Spatial Data Warehouse,简称SDW)是集成的、面向主题的、相对稳定的、反映时间变化和地理空间变化的空间数据存储,以支持各级管理人员基于空间数据的分析和决策。空间数据仓库是GIS、空间数据库与数据仓库技术相结合的产物,它在普通数据仓库基础上,引入空间数据,增加对空间数据的存贮、管理和分析能力,根据主题从不同的空间数据源中截取从瞬态到区段直至全球
7、系统的不同规模时空尺度上的信息,从而为地学研究以及有关资源环境政策的制定等空间决策支持过程提供最好的信息服务。它是数据仓库与空间处理分析的综合,具有空间,时间和主题的高度集成。从信息科学的角度来说,它是对数据仓库加进了非结构化信息处理。,122 空间数据仓库的概念和内涵,lSDW支持多种数据源:数据库,数据文件,应用程序等;lSDW中存放的不仅是供使用的数据,还有在一定激发条件下能主动其作用的处理规则,算法,甚至是过程等;lSDW中数据并不完全是原始数据的简单归并和搬家,而是增值和统一,因此,“汇总并统一”是一种可取的描述;l数据的集成化表明数据在结构上具有综合性,并且在语言上是异构的,在进入
8、SDW之前,必须经过加工和集成,这是SDW建设中最关键,最复杂的一步;l历史化表明它可以截取不同时间尺度上的信息,从瞬态到区段直到全体。SDW以时间为基准管理(积累,使用并处理)数据,即使依赖与时间维的数据结构;lSDW保存和管理的是“对象”数据以及与之相关的处理规则,算法和过程等的统一体,它们在SDW中以打包及有序存放的形式被保存和维护,且需要即可使用。,123 空间数据仓库的体系结构,124 空间数据仓库的关键技术,空间数据仓库机制的研究围绕空间数据仓库的实际应用的需求,探索空间数据仓库的关键技术。(1)支持空间信息的空间数据仓库模型:空间数据仓库的数据模型是普通数据仓库的数据模型的有效扩
9、充,必须针对空间信息的特点,对星型模型和雪花模型进行扩展。(2)支持空间数据导航的元数据机制:空间数据仓库的元数据是人们定义空间数据仓库模型、理解空间数据意义的重要窗口,空间数据仓库的元数据必须支持对空间数据分析的导航。(3)面向海量空间信息的数据存储策略:空间数据仓库包含海量的空间信息。支持对海量空间信息的高效的存储和检索是空间数据仓库的重要需求,也是空间数据仓库的重要特征。因此需要研究面向海量空间信息的数据存储策略。,124 空间数据仓库的关键技术,(4)面向海量空间信息高效检索的空间索引机制:数据索引是提高数据检索效率的有效途径。由于空间数据仓库中涉及海量的空间信息,因此需要研究面向空间
10、数据仓库的索引机制。(5)大规模空间数据处理:由于空间数据所包含的数据量比较大,当空间数据仓库中地理数据、元数据以及历史数据的数据量急速增长时数据的存储和管理机制的调整策略等问题需要更加深入的研究。(6)查询的建立和数据导航技术:空间数据的查询通常比较复杂,而目前的用户界面形式很难满足。必须为空间数据仓库数据查询的输入以及数据查询的建立提供一套合适的机制。(7)快速计算、高速网络、空间数据库的无缝连接、数据挖掘、空间数据联机分析和处理及服务的互操作等关键技术。,126 国内外研究现状,目前国外数据仓库以及空间数据仓库方面的主要工作基础有很多。Stanford大学的数据仓库WHIPS(WareH
11、ouse Information Project at Stanford);美国正在启动一个空间信息处理项目EOS(Earth Overview System),到2003年,对全球地面监测的精度将达到1米的分辨率,该项目对巩固美国在全球的竞争优势具有重要的作用。该项目的主要组成部分之一就是空间数据的联机分析与挖掘技术的研究;IBM的Almenden实验室、北美和德国的一些公司、和科研机构的实验室在这个领域的研究中处于领先位置。目前的空间数据仓库原型系统主要有:AMicrosoft TerraServer(由Jim Gray主持),GeoMiner(由加拿大Simon Fraser大学开发)等
12、。,126 国内外研究现状,在国内,国家“九五”科技重点攻关项目“空间信息共享和处理技术研究”专题项目已取得阶段成果,提出了空间信息共享系统设计方案。视觉与听觉信息处理国家重点实验室开放课题基金项目“空间数据联机分析与空间数据挖掘研究”,该项目重点对空间数据联机分析与空间数据挖掘及底层的空间数据仓库技术作基础理论研究。,127 目前空间数据仓库主要研究内容,目前,数据仓库的研究主要集中在数据提取,数据集成,性能优化等方面的研究:(1)空间数据仓库模型的研究:空间数据面向主题的集成的一个关键步骤是空间数据仓库的建模。空间数据仓库的逻辑模型与普通数据仓库模型一样,通常采用类似的多维模型。普通数据仓
13、库模型通常采用星型模型或雪花模型。与普通数据仓库模型相比,空间数据仓库要管理复杂的空间数据类型,其维和度量中不仅可以包含简单数据类型的数据,同时也可以包含空间对象。由于空间对象占用的存储空间较大,其操作也比较复杂,这就需要扩充维和度量的定义,以便更有效地处理这样的维和度量。(2)海量空间数据的存储:空间数据仓库通常以空间数据库为基础,由于空间数据仓库涉及海量的空间信息,同时空间信息计算耗费的资源较多,确定空间信息的合理存储策略(如数据分片等),以便计算和显示,也是当前许多专家关注的焦点。,127 目前空间数据仓库主要研究内容,(3)异构空间数据源的有效集成:空间数据仓库所要集成的数据分布于各个
14、企业或各个政府部门,这些数据源通常具有不同的数据格式;此外,空间数据的表示、存储和访问方式目前还没有统一的标准,空间数据的语义也往往比较复杂。这就给空间数据的集成和共享带来了极大的困难,如何实现空间数据的有效集成是国内外空间数据仓库工程的一个重点和难点。(4)空间数据仓库的索引机制:空间数据库的索引方法主要包括:z-序索引、四方树索引、kd-树索引、R树索引、R+树索引等。由于空间数据仓库中的数据是海量的、极少更新的、随时间变化的特点,其主要的操作是数据的追加和查询,因此要求针对空间数据仓库的特点设计更加合适的空间数据仓库索引机制是空间数据仓库机制的重要组成部分,也是目前许多专家关注的焦点。,
15、127 目前空间数据仓库主要研究内容,(5)空间数据仓库元数据机制:空间数据仓库的元数据是确定空间数据仓库的逻辑结构、存储策略的重要组成部分。从数据仓库建设者的角度来看,空间数据仓库元数据是数据仓库的描述,是关于数据加载方法和数据加载频率、数据存储和应用的描述信息。从用户的角度来看,它是用户理解和使用数据仓库的向导。空间数据仓库元数据的主要内容包括:数据仓库的描述信息、数据仓库的信息源描述、数据转换方法描述信息、数据加载方法的描述信息、业务术语的定义、业务处理的规则的描述信息。因此要求建立合理的空间数据仓库元数据的机制,确保空间数据仓库的合理性和高可用性。,128 OLAP,1.2.8.1 O
16、LAP的概念 按照关系数据库之父.Codd的定义,OLAP(Online Analysis Processing)是大量多维数据的动态综合(synthesis),分析(analysis)和合并(consolidation),它是能够快速交互地,方便地获取它们所需信息地一些技术(多维数据分析,神经网络等)地综合,它通过快速,一致,交互地访问各种可能地信息试图,帮助数据分析人员,管理人员,决策者洞察数据显示,掌握隐藏其中地规律。关于OLAP地详细定义,Codd曾给出了十二条准则,其后,还对其进行了扩充。根据产品的实际应用情况和用户对产品的需求,人们提出了一种对更简单明确的定义,即共享多维信息的快速
17、分析(Fast Analysis of Shared Multidimensional Information,简称FASMI)。目前,常见地OLAP有基于多维数据库的MOLAP(Multidemention OLAP),以及基于关系数据库ROLAP(Relation OLAP),以及混合的HOLAP(Hybrid OLAP)。,128 OLAP,1.2.8.2 OLAP与OLTP的区别 OLTP和OLAP有很大的差别,在传统的OLTP技术中,所依赖的是实体、联系、功能分解、状态转换分析和事务处理等概念和方法;而在OLAP技术中,主要使用的是事实表、维表、层次(hierarchies)、稀疏性
18、(sparsity)、指标聚集等概念和方法。,128 OLAP,1283 目前主要研究内容 多维空间数据模型空间数据Cube的构造和维护 空间Cube数据的多维显示,1284关键技术 支持cube构造的多维数据存储模型 空间数据cube实例化视图选择方法研究 空间数据cube的构造算法 在二级存储中高效构造高维的cube和空间数据cube,129 空间数据仓库系统,空间数据仓库系统是引入数据仓库后的计算机系统。其目标是支持用户利用存储地信息进行分析、处理和决策。空间数据仓库有四部分组成:数据,计算机硬件,软件,用户,1210 GIS中使用空间数据仓库的优势,(1)在操作上,GIS源数据由异构变
19、为同构,消除了数据模型及语法、语义的差异,数据库可直接被DBMS访问,加快了查询和分析处理的速度。访问仓库的数据不需要占用信息源的系统资源,不会像直接访问信息源那样增加开销。(2)在功能上,除了便于管理、维护外,GIS空间数据仓库为其数据挖掘准备了条件。如果数据挖掘技术利用得当,还可扩充GIS的功能,当然,数据仓库及其技术并未抛弃关系型数据库和DBMS的一系列功能。(3)有望解决OPENGIS在数据上不一致的问题。(4)具有明显的社会意义,有利于加强商业、资源、环境等的宏观决策。可以说,数据仓库是伴随着C/S技术和并行数据库的发展孕育而生的,大型GIS要处理多源的、多变量的、异构的、海量的地理
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 空间 信息系统 原理
链接地址:https://www.31ppt.com/p-5372184.html