数据管控体系设计ppt课件.ppt
《数据管控体系设计ppt课件.ppt》由会员分享,可在线阅读,更多相关《数据管控体系设计ppt课件.ppt(91页珍藏版)》请在三一办公上搜索。
1、数据管控体系设计,大纲,管控体系设计数据管控机制设计数据质量管理体系元数据管理体系数据标准管理体系数据生命周期管理体系,数据管控模块组成,管控组织,管控工具,管控流程,管控政策,数据生命周期,数据标准,元数据,数据质量,管控手段,管控机制,管控机制:数据管控实现的关键要素,管控手段:数据管控关注的重点领域,管控机制和管控手段形成数据管控矩阵,能有序高效地提升数据架构各个层次的管控及协作能力,增强企业级数据模型驱动力,使其有序开展及持续优化,数据模型描述了管控手段的信息内容,数据架构是管控手段的落地表现,管控机制为模型和架构提供了保障机制,数据管控各组成部分意义:管控机制,定义数据管控各个领域的
2、工作方法和步骤明确各个相关部门在数据管控各个领域中的分工和协作关系,管控流程,通过政策和规范的方式发布数据管控各个相关部门的责任明确数据管控各领域的政策、规范和实施办法确保数据管控的管理原则和执行是一致地贯穿全行改变或规范各个部门数据管控人员的行为,管控政策,提供一套数据管理的支撑系统支撑数据质量的规则,问题的集中管理支撑数据标准的发布,查询,变更等流程,管控工具,建立明确的数据管控组织架构与人员角色定义明确某类数据的责任人定义不同数据责任人的职责,对某一特定数据范围内的信息的正确性,一致性和及时性负责,管控组织,一致和准确的数据是业务运营与决策分析的基础良好的、高质量的数据可以有效降低系统建
3、设成本外部的监管和规范,如反洗钱、Basel II、SO等,对数据的质量提出了越来越高的要求,数据质量管理,减低成本、简化管理(控制存储需求、软硬件以及人力成本等)提高效率(提升系统性能,合理利用人力、流程、技术提高信息服务效率)控制风险,有效合规(提高对审计的控制、遵守政府和行业规范等),数据生命周期管理,业务术语、标准等的统一定义、管理、引用各式数据流(像文件交换、点对点直连、企业数据总线等)的管理数据的创建引用关联、血缘的分析对其它数据管理领域,像数据质量、数据生命周期的支撑,元数据管理,加强业务的标准化工作,规范重点业务内容,强化业务管理加强现有数据的交互性,支撑统一的业务管理推动主数
4、据系统的建设,完成重点数据的统一管理,完全共享,数据标准管理,数据管控各组成部分意义:管控手段,制定数据管控政策是将最高管理层对数据管控的期待变成思想和策略,通过制度的制定和始终如一的执行来树立全行的数据管控理念,确保数据管控组织围绕管控制度来进行工作目标的定义和实践政策的主要目标是:明确数据管控各个相关部门的责任确保数据管控的管理原则和执行是一致地贯穿全行将高级管理层的目标和行为期待作为一致性的讯息提供给机构改变或规范各个部门数据管控人员的行为,数据管控政策是管控的中心思想和执行策略,数据管控管理办法与细则,管理办法,实施细则,客户数据管控政策建议,客户数据管控管理办法和实施细则建议(1/2
5、),客户数据管控管理规范和实施办法(2/2),数据责任人,总行,分行1,分行2,分行,数据治理决策委员会,总行领导,数据治理委员会,数据治理办公室,数据标准管理员,数据架构主管,数据治理经理,数据安全主管,数据质量主管,个人金融部,风险管理部,公司业务部,。,业务线责任人,区域,数据架构管理员,数据标准主管,元数据管理员,数据安全管理员,数据质量管理员,数据模型主管,数据责任人,数据录入人员,业务定义人员,数据使用人员,系统责任人,核心系统,信贷系统,网银系统,ESB,数据建模师,元数据主管,客户管理,数据仓库,资产负债,.,系统技术责任人,系统专家,数据维护人员,系统业务责任人,项目经理,架
6、构师,开发测试人员,业务分析人员,客户数据管控组织,针对每个数据管控手段提出相应的管理流程,并在此基础上形成客户的数据管控流程,数据质量事后管控,数据质量事中监控,数据生命周期,数据标准,元数据,标准申请,标准设计,审核与发布,落地推广,审核与评估,数据质量,1,2,3,4,评估,管理手段设计,管理手段落地推广,数据质量事前防范,元数据申请,审批与发布,推广与使用,管理与维护,工作界面整合,业务部门人员,IT部门人员,数据管控管理人员,数据标准管理,标准申请,标准更新,标准查询,标准监控,管控工具支撑环境,管控体系设计数据管控机制设计数据质量管理体系元数据管理体系数据标准管理体系数据生命周期管
7、理体系,大纲,数据质量管理制度及规范,数据质量管理组织架构,数据质量事后治理,数据质量事前防范,数据质量事中监控,数据质量管理流程,数据质量管理支撑工具,1,2,3,4,1,2,3,数据质量稳步提升,银行数据质量管理框架建议,问题快速处理,回顾总结,状态报告,监控检核方案制定,监控执行,问题分析与风险评估,数据问题收集,数据质量管理支撑工具,数据质量管理制度及规范,数据质量管理组织架构,数据质量事后治理,数据质量事前防范,数据质量事中监控,数据质量管理组织必须遵守的相关制度及规范,同时数据质量事后治理、事中监控、事前防范三个环节必须以之为基准开展工作,并保证数据质量管理的实现。数据质量管理的日
8、常活动及数据质量相关项目中积累的各类经验,将有助于制度及规范的完善,增强管理保障的力度,进而更好地保证数据的总体质量。,1,1,数据质量管理流程,1,2,3,数据质量管理框架说明数据质量管理制度,数据质量管理支撑工具,数据质量管理制度及规范,数据质量管理组织架构,数据质量事后治理,数据质量事前防范,数据质量事中监控,2,落实数据质量管理组织职责,明确岗位责任,推进数据质量事后治理、事中监控、事前防范流程执行。数据质量事后治理、事中监控、事前防范等流程改进优化,也会触发数据质量管理组织职责合理调整。,2,数据质量管理流程,1,2,3,数据质量管理框架说明数据质量管理组织,数据质量管理支撑工具,数
9、据质量管理制度及规范,数据质量管理组织架构,数据质量事后治理,数据质量事前防范,数据质量事中监控,数据质量事后治理、事中监控流程中都涉及到对数据的修改、清洗以解决质量问题,因此可以相互分享知识和经验。数据质量事中监控有助于发现事后治理的潜在需求。 在数据质量事后治理、事中监控流程中都会发现数据质量问题,对于影响重大或者发生频繁的数据质量问题,针对这些问题需要采取主动事前防范保证措施,以降低未来对数据质量的负面影响。,3,数据质量管理流程,1,2,3,3,数据质量管理框架说明数据质量管理流程,数据质量管理支撑工具,数据质量管理制度及规范,数据质量管理组织架构,数据质量事后治理,数据质量事前防范,
10、数据质量事中监控,4,数据质量事后治理、事中监控、事前防范在执行过程中,将发现的数据质量问题、数据质量问题解决经验记录在数据质量管理支撑工具中,为后续的数据质量治理提供依据和借鉴。数据质量管理支撑工具,通过数据质量检查报告,分析数据质量问题热点区域,为数据质量流程改进提供重要依据。数据质量规则管理是数据质量管理支撑工具的一个重要组成部分。,4,数据质量管理流程,1,2,3,数据质量管理框架说明数据质量管理支撑工具,数据质量管理基本制度及规范,制度规范,管理办法,技术规范与模板,数据质量管理规范,数据质量检查规则管理办法,数据质量事后治理管理办法数据质量清理提升方案审核数据质量提升方案复核,数据
11、质量事中监控管理办法自动监控与手工监控质量问题处理质量问题分析及报告质量状态报告,数据质量事前防范管理办法数据库改造需求评审源系统改造需求评审业务流程改造需求评审,数据质量检查规则模板,数据质量事后治理方案模板,数据质量事前防范方案模板,注:数据质量管理制度及规范制定工作,需要各部门积极参与,并讨论并达成一致,以确保规范及制度覆盖数据质量管理工作的各个方面。,数据质量考核办法,数据质量检核计划模板数据质量状态报告模板,银行数据质量管理建议:数据质量管理制度及规范,所有信息、属性是否按照系统和业务规则完整填写,是否有遗漏的情况。,完整性,是否准确地收集到相关信息,并如实在系统中进行录入和处理。,
12、正确性,不同系统、不同业务之间关联的数据之间是否一致,包括一致的定义、含义、取值及操作规则等。,一致性,数据是否能够及时地被获取,是否能够反应当前业务运营状况,以满足对数据进行加工、查询和分析的业务需求。,及时性,数据是否被适当地发布和使用,以确保数据被安全地使用,适当性,以业务的需求为导向,选取业务对数据质量要求最为紧迫的数据,设定相应的数据质量指标。以各机构/部门的实际能力为基础,所选的指标目标值是各部门经过一定努力可以达到的。设定可量化的指标,并尽量选取可通过IT工具进行统计和计算的指标。,示例,数据质量管理制度及规范:数据质量考核办法,合约关键数据质量指标,财务关键数据质量指标,客户关
13、键数据质量指标,产品关键数据质量指标,渠道关键数据质量指标,资产关键数据质量指标,数据质量考核指标,客户关键数据完整性,客户关键数据正确性,客户关键数据一致性,客户关键数据及时性,客户关键数据适当性,考核的数据对象,考核指标,简要说明,借助数据质量管理支撑工具稽核ECIF 、 PCRM、 核心系统的客户关键信息是否存在遗漏。,采用抽样核验的方式,定期抽样客户的真实资料信息与ECIF 、PCRM、核心系统、个贷等系统中的信息进行比对,验证客户关键数据是否属实,借助数据质量管理支撑工具核验ECIF、核心系统、信贷系统等关键客户数据的一致性,采用抽样核验的方式,定期核验ECIF、核心系统、PCRM中
14、客户关键数据的采集、维护的及时性(事后录入),采用抽样核验的方式,定期、定性地考核客户关键数据是否被适当地发布和使用。,说明:客户数据作为银行最为关注的业务数据之一,当前客户数据质量的问题较为突出,建议将客户数据质量作为数据质量考核的重点。,机构关键数据质量指标,员工关键数据质量指标,事件关键数据质量指标,数据质量管理制度及规范:数据质量考核示例,示例,银行数据质量管理建议:数据质量管理组织,数据责任人,总行,分行1,分行2,分行,数据治理决策委员会,总行领导,数据治理委员会,数据治理办公室,数据标准管理员,数据架构主管,数据治理经理,数据生命周期主管,数据质量主管,个人金融部,资金管理部,对
15、公业务部,。,业务线责任人,区域,数据架构管理员,数据标准主管,元数据管理员,数据生命周期管理员,数据质量管理员,数据模型主管,数据责任人,数据录入人员,业务定义人员,数据使用人员,系统责任人,数据建模师,元数据主管,系统技术责任人,系统专家,数据维护人员,系统业务责任人,项目经理,架构师,开发测试人员,业务分析人员,侧重面向当前的数据,根据数据质量检查规则和检查规则,对数据质量进行持续的、周期性的监测。,侧重面向未来的数据,防患于未然。通过业务流程优化、源系统改造等方式保证未来数据质量。,侧重面向历史的数据,按业务系统或者主题分批对数据进行剖析、清洗,提高既有数据的质量。,历史数据,未来数据
16、,数据质量事后治理,数据质量事前防范,数据质量事中监控,事前防范,事中监控,事后治理,当期数据,银行数据质量管理建议:数据质量管理流程,清理发起,规则制定,问题根原因及影响分析,清理方案制定与方案实施,1.2 评估与明细数据质量清理范围,1.3 制定数据质量清理提升工作计划,1.4 获取相关资源,1.5 风险评估,1.1 识别已知数据问题及相关方,2.3 明确数据标准及业务规则,2.4 验证数据质量检查规则,2.2 识别关键数据项,2.5 转换数据质量检查规则为技术实现,2.1 了解目标数据概况,3.1基于数据质量检查规则分析数据,3.2 使用数据质量检查规则校验数据,3.3 分析数据质量问题
17、产生原因,3.4 数据质量问题影响分析,4.1 制定数据质量问题清洗解决方案,4.2 搭建数据清理环境,4.3 执行整改方案,4.4 评估整改方案执行结果,2.4 汇总数据质量 检查规则,注:数据质量事后治理包括清洗、补录、转换、归并等操作,数据质量管理流程:数据质量事后治理,监控检核方案制定,监控执行,状态报告,回顾总结,问题快速处理,问题分析与风险评估,数据标准定义元数据的定义,关键输入,数据质量状态报告数据质量管理知识与经验,关键输出,数据质量事后治理,数据质量事前防范,数据问题收集,数据质量管理流程:数据质量事中监控,业务需求驱动,问题解决驱动,问题根源及影响分析,数据处理流程优化需求
18、,业务流程优化需求,源系统改造需求,面向未来业务需求驱动和问题解决驱动下,采取事前防范措施,保证未来的数据质量。通过分析问题和业务需求,分析可能的事前防范措施:源系统改造、业务流程优化、数据处理流程优化。针对以上改造和优化措施,也需要对管理制度、数据质量检查规则进行相应优化。,方案实施,明确业务环节及应用位置,事前防范启动,问题分析,方案设计,方案实施,制定范围,资源筹备,数据处理流程优化方案,业务流程优化方案,源系统改造方案,数据质量管理流程:数据质量事前防范,数据质量问题管理,数据质量规则管理,数据质量问题分析,数据质量稽核引擎,系统管理,数据质量检查规则定义,数据质量检查规则查询,数据质
19、量检查规则更新,数据质量问题登记,数据质量问题查询,数据质量问题分发,数据质量问题跟踪,元数据管理平台,数据质量问题统计报告,数据质量问题测量评分卡,数据质量问题影响分析,数据质量知识管理,数据质量知识分类管理,数据质量知识内容录入,数据质量知识内容查询,数据质量知识内容更新,业务部门,系统开发维护部门,数据管理部门,接口管理,日志管理,权限管理,核心系统,信贷,网银,数据库直连,样本文件获取,数据质量分析清理,数据分析,数据清理,数据补录,调度管理,数据标准,银行数据质量管理建议:建立全行统一的数据质量管理支撑工具,大纲,管控体系设计数据管控机制设计数据质量管理体系元数据管理体系数据标准管理
20、体系数据生命周期管理体系,此规范应作为制定元数据管理各个规范的指导原则,同时应说明在企业信息数据管理的框架下,和其它模块之间的关系,整体管理办法,此规范是对元数据的管理、维护、考核、组织、流程等方面,做一个完整的要求和说明,以确保元数据的可管理性、可维护性、可用性,系统管理办法,由于元数据管理对业务定义、技术规范、系统建设起到了指导作用,所以元数据系统自身的质量要求应该是最为严格。此规范是作为对元数据系统自身的质量要求,质量管理办法,元数据,虽然元数据是“数据的数据”,但是它本身仍然是一种数据,也有其生命周期,也应有其生命周期管理规范,生命周期管理办法,此规范应作为元数据管理对于各个系统的设计
21、、开发、测试、运行、维护的稽核及监控规范,对系统稽核及监控管理办法,由于元数据的各个内容都是涉及到跨部门跨专业的,如何维持不同背景的人员对元数据的理解及相关的操作(如创建、维护等)能保持一致,有组织、有系统的培训是达到此一要求的有效方法,管理培训办法,由于元数据管理具有强烈的规范性,对一般人员的作业习惯在初期会起到限制的作用,而元数据自身的完整、准确、一致、及时等因素,对各个方面的影响非常重大,所以如何对使用人员提供良好的服务,是元数据实施成败的关键,管理服务办法,元数据管理办法,数据责任人,总行,分行1,分行2,分行,数据治理决策委员会,总行领导,数据治理委员会,数据治理办公室,数据标准管理
22、员,数据架构主管,数据治理经理,数据生命周期主管,数据质量主管,个人金融部,资金管理部,对公业务部,。,业务线责任人,区域,数据架构管理员,数据标准主管,元数据管理员,数据生命周期管理员,数据质量管理员,数据模型主管,数据责任人,数据录入人员,业务定义人员,数据使用人员,系统责任人,数据建模师,元数据主管,元数据管控组织,元数据,元数据申请,审批与发布,制定职责,明确范围,元数据定义,流程描述,明确元数据管理相关人员职责和元数据范围,对技术元数据、业务元数据进行定义,形成统一版本,提交元数据申请,责任部门,数据治理办公室数据主责部门数据录入部门业务定义部分数据使用部门,主要工作内容,明确元数据
23、执行的相关部门和角色,确定相应职责各责任人提出元数据新增、修改、删除的申请确定元数据涉及的业务和系统范围形成技术元数据、业务元数据的初步定义根据申请的相关性,提请不同级别的决策层审核,提交申请,元数据管控流程(1/4),推广与使用,管理与维护,元数据,元数据申请,现状分析,元数据审核,元数据发布,流程描述,根据银行现状, 对申请内容进行审核,评审,确定元数据范围,元数据定义,责任部门,数据治理办公室数据主责部门数据录入部门数据使用部门系统开发维护部门,主要工作内容,决策层对元数据申请进行审批对元数据进行分析,获取数据的血缘关系等对行内元数据的各类申请进行审核和处理,确定元数据范围确定元数据定义
24、包括技术元数据、业务元数据等确定元数据管理人向全行发布元数据,元数据管控流程(2/4),审批与发布,推广与使用,管理与维护,元数据,元数据申请,元数据培训,元数据实现,元数据使用,流程描述,对银行业务条线和技术条线进行元数据培训、实现、使用。,责任部门,数据治理办公室数据主责部门数据录入部门数据使用部门系统开发维护部门,主要工作内容,治理办公室进行元数据培训将元数据录入到元数据管理平台发布元数据应用推广全行各业务系统使用元数据,元数据管控流程(3/4),审批与发布,推广与使用,管理与维护,元数据,元数据申请,元数据评估,元数据变更,元数据废止,流程描述,对元数据使用进行评估,考察相关的实施结果
25、,对相关情况进行总结,提出修改或注销申请,最后形成有效的元数据管控闭环。,责任部门,数据治理办公室数据主责部门数据录入部门数据使用部门系统开发维护部门,主要工作内容,评估元数据使用情况,定期监测元数据在系统中的使用情况,提交使用分析报告将问题返回元数据日常管理层或者专项管理层处理。定期对元数据标准管理工作的相关情况进行总结将需要修改或废止的元数据申请返回给元数据管理层处理,元数据管控流程(4/4),审批与发布,推广与使用,管理与维护,不同的展示工具不同的开发工具不同存储数据库不同的业务定义不同的建模工具不同的专家知识等,元信息,元数据(Meta Data)泛指描述领域概念(Domain Con
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 数据 体系 设计 ppt 课件

链接地址:https://www.31ppt.com/p-1350132.html