数据集成与网格关于数据网格的组织结构问题.ppt

《数据集成与网格关于数据网格的组织结构问题.ppt》由会员分享，可在线阅读，更多相关《数据集成与网格关于数据网格的组织结构问题.ppt（20页珍藏版）》请在三一办公上搜索。

1、数据集成与网格:关于数据网格的组织结构问题,潘久辉暨南大学计算机科学系2006年11月,数据集成与网格关于数据网格的组织结构问题,网格与数据网格,网格:支持资源集成与共享，它通过互联网将跨越地域和组织分布的 计算机系统、数据库、仪器设备等各种资源有机地集成为一体，以实现广域范围的共享。数据网格:支持跨越地域和组织分布的数据集成与共享。数据本身是最重要的共享资源.数据网格的建立是实现网格计算的基础和复杂度极高的工作内容。,一、数据集成与网格,Michael D.Stefano:Distribution Data Management For Grid Computing,一、数据集成与网格,一、

2、数据集成与网格,数据集成,实现多信息源共享，使得任何信息源产生的数据可以被其他信息处理系统有效利用。多种集成方式:多数据库(multi-database),联邦数据库(federated database),数据中介系统（mediator）,数据仓库(data warehouse).不同数据集藏类型:传统的数据集成研究主要考虑由通用DBMS管理的结构化数据库（如关系数据库，对象-关系数据库等），目前已经扩展到考虑以其他组织形式存在的各种信息资源的集成，如文件系统、网站、文档管理系统和科学数据库等。,一、数据集成与网格,分布式数据库与异质多数据库,统一的全局概念模式，完全的透明访问与全局完整性控

3、制。,一、数据集成与网格,联邦数据库,通过模式翻译与联合实现在各信息源之间按对等方式（peer to peer）进行无缝互访,一、数据集成与网格,数据中介系统,通过模式集成支持一个虚拟数据库以提供对多数据源集成数据的透明访问。,一、数据集成与网格,数据汇集,来自多个数据源的数据被归并物理地存储在一个系统中，称之为数据仓库。为使数据仓库内容与信息源按照某种相容性要求保持一致，数据仓库必须按照适当的方式进行更新，称之数据仓库维护。,异构性问题,结构冲突 同类的信息内容存在于具有不同组织形式的数据集藏之中.模式翻译:XML支持以统一的半结构化数据模型相容地观察这些不同性质的数据存储实体。同构化处理:

4、即使不同的数据集藏使用相同的信息表示方法(数据模型),相同的信息可能被作了不同结构化处理.,一、数据集成与网格,一、数据集成与网格,语义冲突 不同数据集藏之间可能在两个层面上发生语义冲突.数据层面:相同数据可能具有不同的表示和解释.模式层面:同类信息对象的表示可能使用不同逻辑结构 能有效表现概念层次结构和语义模型的本体被广泛运用于解决信息集成中的语义冲突问题.,跨组织信息集成问题：,安全互操作性问题:不同组织信息系统间良好互操作性与内部信息安全性之间的冲突消解。信任管理与内部结构隐蔽 资源独立性:保护遗产，并使得信息源自主进行的增量扩充与调整不造成对集成平台的影响。协同开销最小:信息源为提供组

5、织外互操作性在改造扩充自身系统或抽取与传送信息方面所需消耗的资源（其中包括人力与财力）尽可能小,一、数据集成与网格,信息源在包装层支持如下两个抽象层面：,资源视图层：作为可用信息源的外部抽象观察，起到隔离内部组织结构的作用，并提供数据集成平台的高度资源独立性。应用视图层：建立在资源视图之上，用以表示外部应用（或应用集合）对于给定信息源的信息提取需求，使得信息源可以独立于外部应用统一地提供可互操作信息的同时，让外部应用可以按自身需要向信息源定义面向应用的个性化数据服务。,一、数据集成与网格,一、数据集成与网格,例:试用于政务应用中的跨组织数据传播与汇集系统,数据网格系统:提供一个可跨越组织和地域

6、分布动态地按各种形式实现数据集成的平台，在组织结构上,这样一个平台可以分为两个层面构造.资源获取与系统互操作性平面:提供网格环境下数据访问与集成的基础设施。高级集成形式支撑层面:支持数据联邦、数据中介、数据汇集等高级数据集成形式的实现.,二、关于数据网格的组织结构问题,二、关于数据网格的组织结构问题,资源获取与系统互操作性平台 提供网格环境下数据访问与集成所需基础设施的大部分功能特性已经由网格中间件OGSA-DAI所提供，其目的包括：,允许各种数据集藏结合到OGSA框架之中，并通过标准的网格服务接口进行访问。以统一的方式访问差异显著的异质数据资源。支持数据资源注册与发现、以及不同数据集藏系统之

7、间进行互访。,二、关于数据网格的组织结构问题,OGSA-DAI支持的对等初等数据网格,考虑到以及跨组织集成的壁垒问题以及对各种高级集成方式的实现支持，我们需要:对各信息源提供适当的数据包装机制和完备的服务功能。扩展EII实现技术以适配网格计算环境的高层集成方式.,二、关于数据网格的组织结构问题,资源节点提供的服务与接口,帐户及访问权限管理 元数据服务 查询服务 应用视图监视代理服务:提供 持续信息支持 块加载服务(数据上传)资源调度及事务协调服务,数据传播与汇集服务:通过视图复制、多源视图维护及多视图一致性维护等技术有效地实现不同组织间的快速更新传播及数据汇集.数据联邦/中介服务:可更新虚拟视图支持.级联更新传播支持:由虚拟的集成数据库提供的应用视图持续信息支持。,二、关于数据网格的组织结构问题,联邦、中介、汇集等集成方式的实现,谢 谢!,