数据规划与信息架构CI.ppt

数据规划与信息架构,2011年7月10日,文档主标题,文档作者单位名称和作者姓名,文档创建、更新日期。自动更新,蔡文海,文档副标题,2,盲人摸象的启示,生产？企业,。,物资？企业,市场？企业,财务？企业,人事？企业,企 业,企 业,数据处理危机,历史上的数据处理危机 发达国家遇到“数据处理危机”为走出困境出现“信息工程”、IDEF等方法论,CIO的困境 老 总 的 困 境,3,更深层次的危机：历史上的今天,4,数据规划的理论,相关概念,北达软信息化咨询与培训中心数据规划与信息架构,数据规划的内容,数据规划的工程方法,议程/Agenda,当值章节对应的椭圆框使用效果：绘图工具-形状样式-红色系列-细微效果-强调2此椭圆框亦使用了“百叶窗”自定义动画效果,其他章节对应椭圆框不使用任何效果，包括动画效果,用文档主标题替换右侧半圆球中的问好,5,Copyright 2010北达软,此页面相当于Word文档的一级标题页面，即PPT文档的所有一级标题列在此。二级标题使用方法见下页。,数据规划的实例,数据规划目的与意义,一、相关概念,6,Copyright 2009 北达软,数据？信息？数据规划？数据架构？信息架构？,1、数据与信息,数据是使用约定俗成的关键字，对客观事物的数量、属性、位置及其相互关系进行抽象表示，以适合在这个领域中用人工或自然的方式进行保存、传递和处理。信息是具有时效性的，有一定含义的，有逻辑的、经过加工处理的、对决策有价值的数据流。通过人们的参与对信息进行归纳、演绎、比较等手段进行挖掘，使其有价值的部分沉淀下来，并于已存在的人类知识体系相结合，这部分有价值的信息就转变成知识。智慧是人类基于已有的知识，针对物质世界运动过程中产生的问题根据获得的信息尽行分析、对比、演绎找出解决方案的能力。这种能力运用的结果是将信息的有价值部分挖掘出来并使之成为知识架构的一部分。,7,2、数据规划,企业生产经营所需要的信息，从采集、处理、传输到使用的全面规划，侧重信息流的分析，为整合信息资源，实现信息共享的总体规划,左右信息流,内外信息流,上下信息流,8,业务架构,信息架构,信息系统架构,数据架构,物理系统结构,3、数据架构与信息架构,信息架构就是对信息的分类、分层的组织。例如：分层信息有决策层、管理层、操作层等信息；分类信息有财务信息、营销信息、生产信息等,数据架构就是对数据的分类、分层的组织。例如：分层数据有概念数据模型、逻辑数据模型、物理数据模型,9,4、数据规划与信息架构的关系,10,数据规划的理论,相关概念,北达软信息化咨询与培训中心数据规划与信息架构,数据规划的内容,数据规划的工程方法,议程/Agenda,当值章节对应的椭圆框使用效果：绘图工具-形状样式-红色系列-细微效果-强调2此椭圆框亦使用了“百叶窗”自定义动画效果,其他章节对应椭圆框不使用任何效果，包括动画效果,用文档主标题替换右侧半圆球中的问好,11,Copyright 2009 北达软,此页面相当于Word文档的一级标题页面，即PPT文档的所有一级标题列在此。二级标题使用方法见下页。,数据规划实例,数据规划目的与意义,二、数据规划目的与意义,为什么要做数据规划？你的企业是否遇到了数据环境混乱的问题？,12,1、企业信息化建设的基本问题分析,基本问题：两滞后信息资源开发利用滞后于网络建设；管理层和决策层的应用滞后于运作层两缺乏缺乏总体数据规划(重硬件与网络规划)；缺乏数据标准化(泛“标准化”，不实用)核心任务：数据环境改造；应用系统集成基本手段搞好数据规划；搞好数据标准化,13,2、企业信息化建设中的信息孤岛问题,14,3、点到点集成解决方案的灾难,多对多的数据交换，牵一发而动全身商业逻辑多处重复，浪费开发资源难以进行业务流程调整，对业务变化适应性差开发质量难以控制系统开销太大，性能严重下降,15,4、信息孤岛走向信息共享的愿景,在进行业务流程梳理优化的同时搞好数据管理，规划信息资源，则更能使信息系统发挥（资源）效益，也有利于信息技术真正起到作用，而不至于使在信息技术上的投资掉入“黑洞”（乌家培）。,.数据文件(Data-Files).应用数据库(Application Data Bases).主题数据库(Subject Data Bases).数据仓库(Data Warehouse),16,5、信息孤岛走向信息共享的实践方案,17,6、小结,意义：规范化表达企业业务规范数据源，解决数据源唯一性问题规范数据模型，明确数据关系目标：归类整理包括业务表单、统计报表等在内的信息架构建立包含基本数据集、信息分类编码和数据模型等在内的数据架构建立业务信息分布矩阵以及数据架构与信息架构的关系，使数据源分析定位到业务活动层面,18,数据规划的理论,相关概念,北达软信息化咨询与培训中心数据规划与信息架构,数据规划的内容,数据规划的工程方法,议程/Agenda,当值章节对应的椭圆框使用效果：绘图工具-形状样式-红色系列-细微效果-强调2此椭圆框亦使用了“百叶窗”自定义动画效果,其他章节对应椭圆框不使用任何效果，包括动画效果,用文档主标题替换右侧半圆球中的问好,19,Copyright 2009 北达软,此页面相当于Word文档的一级标题页面，即PPT文档的所有一级标题列在此。二级标题使用方法见下页。,数据规划实例,数据规划目的与意义,三、数据规划的理论来源,理查德诺兰（RichardLNolan）的发展阶段论断威廉德雷尔（William Durell）的数据管理理论霍顿(Forest W.Horton)的信息资源管理理论詹姆斯马丁（James Martin）的信息工程方法论企业架构框架ZachmanEAPTOGAFFEAF,20,1、理查德诺兰的发展阶段论断,初始、蔓段、控制：计算机时代特征集成、数据管理和成熟：信息时代特征,21,2、威廉德雷尔的数据管理理论,没有卓有成效的数据管理，就没有成功高效的数据处理，更建立不起来全组织的计算机信息系统数据元素是最小的信息单元，数据管理工作必须从数据元素标准化做起组织中要设立数据管理部门，职责是集中控制和管理数据定义，建立数据管理基础标准和规范化的数据结构，指导协调信息系统开发和使用人员执行标准和规范信息中心的职责数据管理标准化是长期的工作过程，会遇到许多困难，持之以恒才能见到效果,22,3、霍顿的信息资源管理（IRM）理论,企业的信息资源与其它资源有同等地位，IRM是一种新的管理职能。必须将IRM与企业的战略规划联系起来，把信息资源作为战略资产进行管理，在企业的每个层面上识别信息资源和获利机会，并借以构建新的竞争优势企业IRM的目标是“3E”:Efficient（高效）、Effective（实效）、Economical（经济）。,23,4、詹姆斯马丁的信息工程方法论,信息工程作为一个学科要比软件工程更为广泛，它包括了基于当代数据库系统的计算机化企业所必须的相关学科。,信息系统以数据为中心(不是以处理为中心)；数据结构稳定，处理多变；最终用户必须真正参加信息系统开发工作。,24,5、主要的企业架构框架,25,（1）Zachman,26,27,（2）EAP,EAP是一个定义架构的流程，支持业务的信息使用；同时，也是实施这些架构的计划。它是一个如何创建Zachman框架最上边两行（计划者和拥有者）的方法。,28,EAP集中在定义什么样的数据、应用和技术架构来适合并支持整个企业。下图是EAP定义这些架构和相关迁移计划的七个构件。这七个构件按婚庆蛋糕的形状排列，每层代表每个主要任务（或步骤）的焦点。,（2）EAP,EAP 2004,（3）TOGAF,29,架构开发方法,架构内容框架,架构开发指南和技巧,企业连续系列,架构能力框架,分割技术使得企业架构分而治之,Architectural Outputs,细节程度,架构域,与战略目标联系,与可见的元素联系,与业务案例联系,与设计说明联系,30,不同级别架构的细节内容,该表提供一个指南。TOGAF应该适应特定企业的需要，不应该作为绝对的真理。,31,信息架构内容,使得一个好的流程有效 谁需要什么信息?一般信息分类业务流程支持部门流程合作伙伴流程分析 业务记录,信息架构的交付物（业务架构师的任务）当前流程和组织图 R信息需求 RSWOT 分析 R信息交付能力 C/I新的/改进的业务流程 R变革管理 R,客户主数据,财务信息,销售信息,客户服务信息,流程模型,目的：使流程改进成功,输出,更新愿景 更新ADD更新需求,32,数据架构内容,创建所需要的信息需要什么数据?数据分析 交易数据 分析数据 绩效数据转换数据测试数据非结构化数据,考虑 数据生命周期数据管理数据清洗数据迁移 数据治理,数据架构的交付物当前数据模型 R/ASWOT 分析 R/A新的/改进的数据模型 R/A数据路线图 R/A,输出,更新愿景 更新ADD更新需求,33,本阶段目的为支持业务，以利益相关者能够理解、完整一致和稳定的方式来定义主要的数据类型和所需数据源（值得注意的是，这一工作并不关注具体的数据库设计，也不是设计逻辑和物理的存储系统，而是定义与企业相关的数据实体）本阶段方法数据定义 什么实体是必须的，为什么？数据管理 主数据、支持、参考、商业智能、会话、转换规则、接口状态等。数据迁移 数据转换、数据保留、接口-批处理还是实时。数据治理 结构、管理系统、人数据架构储藏库与行业垂直部门相关的通用数据模型，例如零售业的ARTS、电信业的eTOM,数据架构阶段目的及方法,34,输入,外部参考资料架构参考资料非架构的输入架构工作需求能力评估沟通计划架构的输入企业架构组织模型 定制的架构框架数据原则架构工作说明书架构愿景架构储藏库(可重用构建块、组织特定参考模型、组织标准）架构定义文档的草稿架构需求规格书草稿架构路线图的业务架构构件,输出,步骤,见下页,优化和更新架构愿景阶段的交付物:更新的架构工作说明书架构定义文档草稿 基线目标数据架构1.0版(业务数据模型、逻辑数据模型、数据管理流程模型、数据实体/业务功能矩阵)数据架构相关视图架构需求规格书草稿差距分析结果技术需求对将要设计的技术架构的约束更新的业务需求架构路线图的数据架构构件,数据架构阶段的输入输出,35,下面是完成数据架构的活动列表，在实际架构开发中，可能有不同的顺序。这些活动有 选择参考模型、视点和工具开发基线数据架构描述开发目标数据架构描述 进行差距分析，安全和私有性影响分析定义路线图构件 解决跨架构图景的影响进行利益相关者的正式审查最终确定数据架构 建立架构定义文档,更多活动,SWOT分析 业务流程改进对数据的影响 细节 数据模型的类型,步骤 数据架构,数据架构阶段的步骤,36,37,FEA由一套相互关联的参考模型组成，用来进行跨机构业务分析，识别机构内部或跨机构的重复投资、差距和机会。这些参考模型共同组成一个框架，用共同的和一致的方式来描述FEA的重要元素。,（4）FEAF,37,38,数据参考模型主要是在综合层次上描述那些支持项目和业务线操作的数据和信息。数据参考模型描述交互种类，以及发生在政府和其各种用户、组成机关和业务伙伴之间的信息交换的种类。它按照通用的内容域，特别是业务子功能，来进行政府信息分类，并且将那些目录域分解到非常细致的层次，直至多数业务过程和活动都可用的数据元素。,数据参考模型建立了一个通用的可理解的分类，识别重复数据资源，以及使信息在机构和部门之间共享。一个通用的数据分类明细模型会使联邦政府内部以及政府与其伙伴之间的信息交换过程更加流畅。数据参考模型是在一个业务线的基础上产生，而不是靠单个累积的努力。这就要考虑并集中关注对关键改进域的识别，产生明显地可辨识和可度量的结果。,数据参考模型1.0,39,数据参考模型1.0(续）,数据参考模型2.0,40,数据参考模型的抽象模型,41,数据规划的理论,相关理论介绍,北达软信息化咨询与培训中心数据规划与信息架构,数据规划的内容,数据规划的工程方法,议程/Agenda,当值章节对应的椭圆框使用效果：绘图工具-形状样式-红色系列-细微效果-强调2此椭圆框亦使用了“百叶窗”自定义动画效果,其他章节对应椭圆框不使用任何效果，包括动画效果,用文档主标题替换右侧半圆球中的问好,42,Copyright 2009 北达软,此页面相当于Word文档的一级标题页面，即PPT文档的所有一级标题列在此。二级标题使用方法见下页。,数据规划实例,数据规划目的与意义,四、数据规划的内容,信息架构是企业所有人员完成自己工作所需信息的集合，分层分类管理。数据架构描述了一个组织的逻辑、物理数据资产和数据管理资源的结构，它是一组分层的模型，为战略性的计划提供坚实的基础。,43,1、信息架构,44,2、数据战略：应用孤立到信息共享的跨越,在进行业务流程重组的同时搞好数据管理，规划信息资源，则更能使信息系统发挥（资源）效益,，也有利于信息技术真正起到作用，而不至于使在信息技术上的投资掉入“黑洞”（乌家培）。,.数据文件(Data-Files).应用数据库(Application Data Bases).主题数据库(Subject Data Bases).数据仓库(Data Warehouse),45,3、概念数据模型,供应商,材料,科目,客户,销售合同,财务凭证,采购订单,销售订单,计划,产品,发货单,收货单,组织,人员,企业数据概念模型：是在整个企业的范围内，划分企业数据的基本类别（数据实体），以及识别出它们之间的关系。,46,概念数据模型：关注的是支撑所有企业业务的主数据,主数据,Meta Data,Entity 3,Entity 2,Entity 1,企业的所有业务运作都是主数据中数据的组合应用,例如：销售、建销售订单这个业务场景是以下主数据的组合演绎：客户、产品、时间、公司、销售组织,Entity 1,Entity 2,Entity 3,.,TransactionTransaction Data:订单、合同、凭证、,企业数据架构,47,4、逻辑数据模型,48,逻辑数据模型，是对数据实体的进一步细分，并找出逻辑关系与识别主要属性。,5、物理数据模型,物理数据模型应在IT系统实施项目中，根据逻辑数据模型去建立。,49,6、数据分布：数据的业务分布与系统分布的分析方法(CRUD矩阵),50,7、参考模型、标准化,参考模型举例：TOGAF的集成信息基础设施参考模型 FEA的数据参考模型 行业参考模型数据标准：数据元标准 信息分类编码作用：利用成熟模型可以在数据建模中避免设计缺陷和不足 在系统集成中提供标准，规范数据接口,51,数据元标准化的作用,信息化的目标:实现各种不同业务系统间跨地域、跨行业、跨部门的信息共享和业务协同。,数据名称的不一致 数据长度的不一致 数据表示的不一致 数据含义的不统一,正确和适当的数据使用和解释的先决条件之一是，这两个数据的使用者和所有者对数据有一个共同的理解和描述,52,信息分类编码标准化的作用,信息分类编码标准化是简化信息交换、实现信息处理和信息资源共享的重要前提，是建立各种信息管理系统的重要技术基础和信息保障依据，是企业标准化的重要组成部分，目的是以满足在企业信息化建设中实现互联互通、资源共享和信息交换、处理的需要。通过分类编码标准化，可以最大限度地消除对信息命名、描述、分类和编码的不一致造成的混乱、误解等现象，可以减少信息的重复采集、加工、存储等操作，使事物的名称和代码的含义统一化、规范化，确立代码与事物或概念之间的一一对应关系，以保证数据的准确性和相容性，为信息集成与资源共享提供良好的基础，而且为建立公共数据库创造有利条件。,53,8、数据管理,数据是一种重要的资源，数据管理不仅在技术上而且在管理和组织上都有不同的需求。数据管理制度数据安全数据迁移数据部署数据备份/容灾,数据管理的主要功能：审核：资料的合法性、真实性和全面性纠错：依据历史数据对新数据对比分析，确保其准确与完整校验：通过数据库系统与收集资料的核对，有效揭示潜在风险服务：为业务人员提供数据支持挖掘：开展数据研发，开发数据产品,54,数据规划的理论,相关理论介绍,北达软信息化咨询与培训中心数据规划与数据管理概论（上）,数据规划的内容,数据规划的工程方法,议程/Agenda,当值章节对应的椭圆框使用效果：绘图工具-形状样式-红色系列-细微效果-强调2此椭圆框亦使用了“百叶窗”自定义动画效果,其他章节对应椭圆框不使用任何效果，包括动画效果,用文档主标题替换右侧半圆球中的问好,55,Copyright 2009 北达软,此页面相当于Word文档的一级标题页面，即PPT文档的所有一级标题列在此。二级标题使用方法见下页。,数据规划实例系,数据规划目的与意义,五、数据规划的工程方法,56,Copyright 2009 北达软,1、业务需求分析,2、信息需求分析,58,3、数据建模,59,4、需求获取,60,数据规划的理论,相关概念,北达软信息化咨询与培训中心数据规划与数据管理概论（上）,数据规划的内容,数据规划的工程方法,议程/Agenda,当值章节对应的椭圆框使用效果：绘图工具-形状样式-红色系列-细微效果-强调2此椭圆框亦使用了“百叶窗”自定义动画效果,其他章节对应椭圆框不使用任何效果，包括动画效果,用文档主标题替换右侧半圆球中的问好,61,Copyright 2009 北达软,此页面相当于Word文档的一级标题页面，即PPT文档的所有一级标题列在此。二级标题使用方法见下页。,数据规划实例,数据规划目的与意义,六、数据规划案例介绍,XX电网公司规划案例？XX交通部门规划案例？,62,1、XX电网公司规划案例,企业生产经营所需要的信息，从采集、处理、传输到使用的全面规划，侧重信息流的分析，为整合信息资源，实现信息共享的总体规划,左右信息流,内外信息流,上下信息流,63,（1）范围,本部,供电局,发电公司,输电公司,省网公司,总部,XX企业信息资源规划,本部,电厂,本部,局,64,（1）范围,65,（2）业务分析阶段主要成果,业务模型（全域、业务域）按“业务域-业务过程-业务活动”建立的业务模型，是对现有业务需求的梳理与优化，可作为业务系统应用的需求规范业务模型划分为最小的业务单元业务活动后，具有相对的稳定性，可根据具体需求进行灵活配置与组合实现了业务过程与其对应的用户视图的关联，使得理解业务的同时，能够获得相关的数据项用户视图（登记、规范化）在业务梳理的过程中，对每项业务需要的或产生的数据（包括单证、报表、账册、其他）进行收集、整理、归类，并将电子文件保存在元库中，作为业务系统原型开发的基础对用户视图中的栏目内容进行分析，整理形成数据项集，逐渐消除同义异名的情况，统一规范用户视图的数据项信息流分析（1-DFD、2-DFD）识别出与业务域有信息流向关系的外单位（包括上级部门、供应商、客户等）以及用户视图，产生上下级、部门间的交换信息不同业务系统间横向信息流及上下级单位间的纵向信息流分析结果，为建立信息交换平台、共享数据模型等奠定基础,66,（3）建模阶段主要成果,数据模型（）系统数据建模是将功能模型产生的数据进行分析归类，按数据库规范化的要求组成基本表的结构，形成业务主题数据库主题数据库的建立，反映了用户的综合性信息需求，是数据中心建设中数据库设计的原型按业务需要对主题数据库的分析，经过讨论和全局协调，识别实体的属性并规范化数据结构产生基本表，作为业务系统的数据库设计原型数据元素/项()用户视图规范的过程产生数据项，基本表属性的识别过程中产生数据元素，通过计算机自动匹配或根据经验人机交互查找两种方式进行规范，形成统一的数据元素集数据元素是数据库建立的基本元素，按不同用户需求形成数据项，组织形成业务系统的界面信息分类编码(目录)根据信息内容的属性或特征，将信息按一定的原则和方法进行区分和归类，并建立起一定的分类系统和排列顺序，构成信息分类编码标准通过建立数据元素与信息分类编码的关联，使编码规范落实到主题数据库的基本表中，同时通过对用户视图的分析和基本表的建立也补充了一些编码信息分类编码标准化是进行信息交换和实现信息资源共享的重要前提，是实现管理工作现代化的必要条件,67,（4）项目主要成果,企业信息资源规划方案（）数据源分析（）基本数据集标准（）数据模型标准（）原始资料（）,68,2、XX交通部门规划案例,业务域定义 业务过程定义 业务活动定义 业务过程关联的用户视图 主题数据库识别 基本表登记 基本表组成登记 数据元素管理,69,（1）业务域,70,（2）业务过程,71,（3）业务活动,72,（4）业务过程关联的用户视图,73,（5）主题数据库识别,74,（6）基本表登记,75,（7）基本表组成登记,76,（8）数据元素管理,77,“企业信息化”VS“信息化企业”数据规划 VS 信息架构是信息资源网?,78,总结：,Thanks 谢谢！蔡文海,北达软信息化咨询与培训中心国家信息资源管理北京研究基地,79,Copyright 2011北达软,