主数据管理和实施.docx
《主数据管理和实施.docx》由会员分享,可在线阅读,更多相关《主数据管理和实施.docx(14页珍藏版)》请在三一办公上搜索。
1、主数据管理和实施类丽军(),软件架构师,EMC简介:企业主数据是用来描述企业核心业务实体的数据,比如客户、合作伙伴、员工、产品、 物料单、账户等;它是具有高业务价值的、可以在企业内跨越各个业务部门被重复使用的数据, 并且存在于多个异构的应用系统中。本文将针对主数据管理的概念以及主数据管理解决方案的实 施等方面跟大家作一个探讨。发布日期: 2009年4月02日级别:初级访问情况 2596次浏览建议: 3 (查看或添加评论)平均分(共4个评分)前言企业主数据是用来描述企业核心业务实体的数据,比如客户、合作伙伴、员工、产品、物料单、 账户等;它是具有高业务价值的、可以在企业内跨越各个业务部门被重复使
2、用的数据,并且存在 于多个异构的应用系统中。本文将针对主数据管理的概念以及主数据管理解决方案的实施等方面 跟大家作一个探讨。主数据和主数据管理的概念企业主数据可以包括很多方面,除了常见的客户主数据之外,不同行业的客户还可能拥有其他各 种类型的主数据,例如:对于电信行业客户而言,电信运营商提供的各种服务可以形成其产品主 数据;对于航空业客户而言,航线、航班是其企业主数据的一种。对于某一个企业的不同业务部 门,其主数据也不同,例如市场销售部门关心客户信息,产品研发部门关心产品编号、产品分类 等产品信息,人事部门关心员工机构,部门层次关系等信息。数据管理的范畴和主数据管理的概念图1.数据管理的范畴I
3、 交易数据主数据主数据 关系数据元1I1I1I数I1II据II如图所示,企业数据管理的内容及范畴通常包括交易数据、主数据以及元数据。 交易数据:用于纪录业务事件,如客户的订单,投诉记录,客服申请等,它往往用于 描述在某一个时间点上业务系统发生的行为。 主数据:主数据则定义企业核心业务对象,如客户、产品、地址等,与交易流水信息不 同,主数据一旦被记录到数据库中,需要经常对其进行维护,从而确保其时效性和准确性; 主数据还包括关系数据,用以描述主数据之间的关系,如客户与产品的关系、产品与地域的 关系、客户与客户的关系、产品与产品的关系等。 元数据:即关于数据的数据,用以描述数据类型、数据定义、约束、
4、数据关系、数据 所处的系统等信息。主数据管理是指一整套的用于生成和维护企业主数据的规范、技术和方案,以保证主数据的完整 性、一致性和准确性 ( The set of disciplines, technologies, and solutions used to create and maintain consistent, complete, contextual and accurate business data for all stakeholders (users, applications, data warehouses, processes, companies, tradin
5、g partners, customers, etc.) across and beyond the enterprise ” )。主数据管理的典型应用有 Customer Data Integration 一客户数据管理和 Product Information Integraiton 产品数据管理。图2.主数据管理的信息流一般来说,主数据管理系统从IT建设的角度而言都会是一个相对复杂的系统,它往往会和企业 数据仓库/决策支持系统以及企业内的各个业务系统发生关系,技术实现上也会涉及到ETL、 EAI、EII等多个方面,如图2所示,一个典型的主数据管理的信息流为:1 某个业务系统触发对企业主数
6、据的改动;1 主数据管理系统将整合之后完整、准确的主数据分发给所有有关的应用系统;1 主数据管理系统为决策支持和数据仓库系统提供准确的数据源。因此对于主数据管理系统的建设,要从建设初期就考虑整体的平台框架和技术实现。以客户主数据为例,常见的主数据域包括: Party:参与方。参与方包含的范围是所有与企业发生了或者发生过正式业务关系的任 何合法的实体,比如填写了投保单的参与方。Party是分类别的,可以是个人、机构和团 体。对于Party来说,因为开展业务的需要,可能要对他们进行分级、分类,比如VIP,黑名单等。个人包括个人基本属性、个人名称、职业、性别、教育等自然属性;机构是指在 法律上有登记
7、的组织实体,可以分为政府机构、商业机构、非盈利机构等类别;团体可以有 多种形态,比如他们可以是家庭、兴趣小组、某个大机构中的一部分,或者通过某种数据分 析技术得出的客户细分群体。 Party Role:参与方在业务中扮演的角色。例如,对于保险行业而言,可以有:投保人, 被保人,受益人,担保人,报案人,核保人,查勘员,核赔人等。 Relationship: Party与Party之间的关系,例如可以是:夫妻关系、父子关系、母 女关系、兄弟姐妹关系、总(母)公司分(子)公司关系、企业事业单位隶属、上下级 关系等。 Account :帐户是客户使用企业服务的付费实体。 Location: Locat
8、ion记录的是每个Party可能拥有的所有联系地址,地址的类别包括 邮寄地址、email地址、电信联络地址等。 Contract: Party与企业之间的契约。主数据有几个鲜明的特点,其中包括:它是准确的、集成的,其次它是跨业务部门的,再有就是 它是在各个业务部门被重复使用的。主数据管理的意义图3.主数据管理的要素套 Ep 一OFHC0如图3所示:集成、共享、数据质量、数据治理是主数据管理的四大要素,主数据管理要做的 就是从企业的多个业务系统中整合最核心的、最需要共享的数据(主数据),集中进行数据的清 洗和丰富,并且以服务的方式把统一的、完整的、准确的、具有权威性的主数据分发给全企业范 围内需
9、要使用这些数据的操作型应用和分析型应用,包括各个业务系统、业务流程和决策支持系 统等。主数据管理使得企业能够集中化管理数据,在分散的系统间保证主数据的一致性,改进数据合规 性、快速部署新应用、充分了解客户、加速推出新产品的速度。从IT建设的角度,主数据管理 可以增强IT结构的灵活性,构建覆盖整个企业范围内的数据管理基础和相应规范,并且更灵活 地适应企业业务需求的变化。以客户主数据为例,客户主数据是目前企业级客户普遍面临的一个问题,在大多数企业中,客户 信息通常分散于CRM等各个业务系统中,而每个业务系统中都只有客户信息的片断,即不完 整的客户信息,但却缺乏企业级的完整、统一的单一客户视图,结果
10、导致企业不能完全了解客户, 无法协调统一的市场行为,导致客户满意度下降,市场份额减少。因此,建立客户主数据系统的 目的在于: 整合并存储所有业务系统和渠道的客户及潜在客户的信息:一方面从相关系统中抽取客 户信息,并完成客户信息的清洗和整合工作,建立企业级的客户统一视图;另一方面,客户 主数据管理系统将形成的统一客户信息以广播的形式同步到其他各个系统,从而确保客户信 息的一致; 为相关的应用系统提供联机交易支持,提供客户信息的唯一访问入口点,为所有应用系 统提供及时和全面的客户信息;服务于OCRM系统,充分利用数据的价值,在所有客户接 触点上提供更多具有附加价值的服务; 实现SOA的体系结构:建
11、立客户主数据系统之前,数据被锁定在每一个应用系统和流 程中,建立主数据管理系统之后,数据从应用系统中被释放出来,并且被处理成为一组可重 用的服务,被各个应用系统调用。主数据管理系统与数据仓库系统的关系主数据管理系统与数据仓库系统是相辅相成的两个系统,但二者绝不是重复的,也不是互斥的。 它们有很多共同之处: 首先二者对企业都具有相同的价值,可以减少数据冗余和不一致性、提升对数据的洞察 力,二者都是跨部门的集中式系统; 其次二者都依赖很多相同的技术手段,都会涉及到ETL技术、都需要元数据管理、都 强调数据质量; 第三就是二者建设手段类似,都需要数据治理的规范作为指导、都需要不同系统、不同 部门的协
12、作、需要统一的安全策略。但是,主数据管理系统和数据仓库/决策支持系统二者之间也存在很多不同: 处理类型不同:主数据管理(MDM)系统是偏交易型的系统,它为各个业务系统提供联 机交易服务,系统的服务对象是呼叫中心、B2C、CRM等业务系统;而数据仓库是属于分 析型的系统,面向的是分析型的应用,是在大量历史交易数据的基础上进行多维分析,系统 的使用对象是各层领导和业务分析、市场销售预测人员等; 实时性不同:与传统的数据仓库方案的批量ETL方式不同,主数据管理系统在数据初 始加载阶段要使用ETL,但在后续运行中要大量依赖实时整合的方式来进行主数据的集成 和同步; 数据量不同:数据仓库存储的是大量的历
13、史数据和各个维度的汇总数据,可能会是海量 的,而MDM存储的仅仅是客户和产品等信息。虽然主数据管理系统和数据仓库系统异同共存,但是二者却有着紧密的联系,并且可以互为促进、 互为补充。举例而言,数据仓库系统的分析结果可以作为衍生数据输入到MDM系统,从而使 MDM系统能够更好地为操作型CRM系统服务。以航空公司为例,客户的主数据模型大致可 以分为三部分:首先包括客户基本信息和偏好信息。客户基本信息:o个人及公司信息o消费者市场状况o常旅客会员卡号,状态,及累计里程等o客户间关系(个体-个体,个体-公司)o联系地址,包括电话,电子邮件等 客户偏好信息:o餐食偏好o是否吸烟o座位偏好o机型偏好o公务
14、舱位偏好o旅行舱位偏好o休息室服务偏好除了这两部分之外,我们还可以从数据仓库系统中提取相关的信息,作为客户主数据的衍生信息 部分,从而更好地、全方位地描述客户特征,这些可以包括: 衍生信息:o本月飞行里程o年度飞行里程(最近12个月内)o提前预订倾向o习惯预订模式o使用自主服务倾向o上次预订使用的信用卡号o累计/本月转签/取消航班次数o转签航班倾向o 取消航班倾向o No Show倾向等。主数据管理系统和ODS的关系在某些情况下,主数据管理系统和ODS系统可能容易被混淆,的确,从实时上来看,主 数据管理系统和ODS系统存储的都是实时数据,但是二者存储的数据内容是全然不同的,主 数据管理系统中不
15、存储交易数据,比如银行客户的交易流水信息是不应该放在主数据管理系统中 进行管理的,这与MDM与ODS的一个很大区别。举一个航空公司的例子,比如某个客户在 电子商务网站上定了一张机票,产生一个订单,然后他又通过呼叫中心要求改签,这个场景中, 两个系统之间要实现客户信息和订单信息的共享,其中客户信息共享通过MDM系统来实现, 而订单信息则需要采用ODS或其它手段进行共享,我们是不推荐把此类信息交由MDM系统 来管理的。回页首主数据管理解决方案介绍目前业界比较常见的主数据管理解决方案主要可以分为三类:第一是依托专业套装软件来实现主数据管理,这类方案是作为套装软件的一部分,主要是为套装软件的其它模块提
16、供服务的,因此,通常功能都缺乏完善性。 还有一类是侧重于分析型应用的主数据管理,这类方案在数据实时同步以及面向交易型 应用时通常缺乏整体方案的完整性。 再有一类就是专注于主数据管理的中立的、完整的解决方案,这一类应用独立于套装软 件,不仅具有整体架构的完整性和先进性,从功能上讲往往也最为完善,除了具有比较完整 的数据模型(Data Model)之外,还会提供广泛的集成性,具备先进的机制实现数据同步, 并且可以对外提供多种预置的主数据服务被外部交易系统调用,从而使系统具有很强的实时 操作性,同时还强调主数据管理、主数据质量控制以及主数据维护的手段和规范性。企业主数据管理系统逻辑架构一个完整的主数
17、据管理解决方案的逻辑架构应如下图所示:图4.主数据管理系统逻辑架构(Batch ETL)iiagemeitiNtsrmm侦 litegrathi在一个完整的主数据管理解决方案中,除了主数据管理的核心服务组件之外通常还会涉及到企业 元数据管理、企业信息集成、ETL、数据分析和数据仓库以及EAI/ESB等其他各种技术和服务 组件。其中主数据管理服务又包括如下一些主要的服务组件: Interface Services :为企业中需要主数据的所有业务系统提供各种服务接口,通过实 时的、批量的接口可以读取或者修改主数据,这些接口包括 Batch, Web Services, XML Interface,
18、 Messaging Interface, Publish/Subscribe, Import/Export Services, Data Standardization Interface, Directory Integration 等。除了这些标准的技术接口之外,对于 某些专有系统还提供适配器(Adapter)接口,通过适配器接口可以和一些特有的系统做接 口,例如企业中的传统(Legacy)应用系统或者SAP等打包应用。 Lifecycle Management Services :履行针对主数据的CRUD操作,执行对主数据存 储库中的数据进行更新、存取和管理时的业务逻辑,除此之外,它还
19、负责维护主数据的衍生 信息,例如客户之间的关系、客户的偏好、客户在各种客户服务渠道上的行为轨迹等。Lifecycle Management Services贯穿整个主数据管理的生命周期,它利用 Data Quality Management Services 来确保数据质量、利用 Master Data Event Management Services 来捕获各种主数据变化等相关的事件,以及利用Hierarchy and Relationship Management Services用来维护数据实体之间的关系和层次。, Data Quality Management Services :确
20、保主数据的质量和标准化,这在主数据管理 解决方案中一个非常重要的组件,在我们从各个业务系统获取数据之后,要对数据进行清洗 和验证,例如对于地址而言,要弥补地址的缺失、地市的缺失、邮编的缺失、进行地址的标 准化等。对于其他数据要进行非空检查、外键检查、数据过滤等。然后要对数据进行匹配/ 重复识别、自动进行基于规则的合并/去重、交叉验证等,并且还要遵从企业的数据管控 规范和流程。它可以是Master Data Management Services的一个内部组件,也可以调用 整个企业的 Information Integrity Services 来实现。, Authoring Services
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 数据管理 实施
链接地址:https://www.31ppt.com/p-5003730.html