地市数据集市技术体制详述.docx
《地市数据集市技术体制详述.docx》由会员分享,可在线阅读,更多相关《地市数据集市技术体制详述.docx(63页珍藏版)》请在三一办公上搜索。
1、前言本标准为各省经营分析系统的地市数据集市、数据及信息业务数据集市、集团客户数据集市建设提供指导。本标准主要包括以下几方面内容:总体说明、系统架构系统功能、数据存储与备份、数据获取、系统技术要求和地市数据集市应用开发管理等。1 范围本标准规定了中国移动经营分析系统数据集市的基本建设原则,适用于中国移动省级经营分析系统地市数据集市、数据及信息业务数据集市和集团客户数据集市的建设。深度运营增值业务数据集市2 规范性引用文件深度运营深度运营增值业务下列文件中的条款通过本标准的引用而成为本标准的条款。凡是注日期的引用文件,其随后所有的修改单(不包括勘误的内容)或修订版均不适用于本标准,然而,鼓励根据本
2、标准达成协议的各方研究是否可使用这些文件的最新版本。凡是不注日期的引用文件,其最新版本适用于本标准。1QB-Y-003-2009中国移动省级NG1-BASS技术规范总册(v2.0)中国移动通信有限公司2QB-Y-003-2010中国移动省级NG2-BASS技术规范总册(v3.0)中国移动通信有限公司3 术语、定义和缩略语下列术语、定义适用于本标准: 字母名词解释D地市数据集市以省级经营分析系统数据仓库为基础,面向地市生产一线的经营分析系统逻辑组件J集团客户数据集市以省级经营分析系统数据仓库为基础,支撑集团客户业务精准化运营工作的经营分析系统逻辑组件J经营分析门户经营分析门户是经营分析系统用户访
3、问并使用经营分析系统各类应用的统一接入平台J经营分析系统v1.0中国移动省级经营分析系统规范(v1.0)J经营分析系统v2.0中国移动省级经营分析系统规范(v2.0)K客户分析及运营模块客户分析及运营模块是在原营销管理子系统的基础上扩充了其他面向客户的应用发展而来,经营分析系统客户分析及运营模块的应用通过NG2-CRM系统与客户接触,共同构成企业客户管理的合力S数据封装指将数据仓库中对数据的访问和操作按照一定粒度封装为独立的服务实体,尽可能屏蔽内部的细节,只提供标准化的交互接口,供内部模块或者外部系统进行调用。数据封装也可以用于数据集市和元数据库的数据Y营销管理子系统营销服务管理功能营销服务管
4、理功能作为客户分析及运营模块的一个功能模块,主要完成市场营销服务过程中除营销服务活动执行环节之外的所有支撑工作,为业务营销和客户服务过程提供IT化的支撑Z数据及信息业务数据集市以省级经营分析系统数据仓库为基础,支撑数据及信息业务分析和运营工作的经营分析系统逻辑组件Z专业数据集市专业数据集市是数据及信息业务数据集市和集团客户数据集市的统称符号和缩略语缩写英文描述中文描述ADCApplication Data Center应用数据中心BOSSBusiness & Operation Support System业务运营支撑系统DSMPData Service Managment Platform数
5、据业务管理平台ETLExtraction, Transformation, Loading抽取、转换和加载ESOPEnterprise Service Operation Platform集团客户业务综合运营平台GPRSGeneral Packet Radio Service通用无线分组业务IMEIInternational Mobile Equipment Identity国际移动设备身份码IMSIInternational Mobile Subscriber Identity国际移动用户识别JDBCJava Database ConnectivityJava 数据库连接KPIKey Per
6、formance Indicator关键绩效指标MASMibile Agent Server移动代理服务器ODBCOpen Data Base Connectivity开放式数据库连接OLAPOn-line Analysis Process在线分析处理RAIDRedundant Array of Independent Disks独立磁盘冗余阵列SANStorage Area Network存储区域网络SCSISmall Computer System Interface小型计算机系统接口SIService Integrator业务集成商SOAPSimple Object Access Pro
7、tocol简单对象访问协议SPService Provider服务提供商VGOPValue-added Service General Operation Platform增值业务综合运营平台WAPWireless Application Protocol无线应用协议4 总体说明4.1 概述中国移动通信有限公司为了支撑生产营销服务,落实精准化营销战略,分别建设了面向地市分公司和特定业务部门的数据集市,支撑地市分公司和特定业务部门运营分析需求。为了更好地支撑地市分公司和特定业务部门的市场营销、业务实施和客户服务等工作,在经过前期调研与地市应用试点的基础上,本期规范加大数据集市个性化应用建设力度,
8、增强分析和监控功能,更好的服务地市一线,解决地市一线人员的实际问题。4.2 目标本期数据集市重点建设目标如下:l 提升地市数据集市对一线生产运营支撑的能力 细化地市数据集市支撑,针对一线业务人员具体问题,建立基于角色的端到端解决方案; 增强应用的准实时性,提高地市数据集市实时支撑一线能力; 进一步深化地市数据集市功能建设,加强客户分析及筛选、自助报表、监控预警、收入预测与稽核等功能建设,满足地市分公司个性化运营需求; 根据地市业务应用需求,提出中高端离网监控预警、恶意欠费风险监控、重点KPI指标监控预警等普遍适合于地市的重点应用。l 深化数据及信息业务数据集市的分析支撑能力 增强数据及信息业务
9、数据集市支撑能力,基于数据及信息业务的具体问题,建立端到端解决方案; 满足VGOP数据存储、数据分析的需求,提升数据及信息业务监控和稽核的支撑能力; 针对数据及信息业务提升营销支撑能力,加强对数据及信息业务资费营销案推荐、数据及信息新业务推荐等应用的建设,满足数据及信息业务精准化营销需求。l 提升集团客户数据集市对集团客户业务运营管理的分析支撑能力 增强集团客户业务数据集市支撑能力,基于集团客户业务的具体问题,建立端到端解决方案; 满足ESOP数据存储、数据分析的需求,提升集团客户业务监控和稽核的支撑能力; 针对集团客户业务提升营销支撑能力,加强集团客户关健指标监控、集团客户信息化重点业务监控
10、等应用的建设,满足集团客户业务精准化营销需求。4.3 建设原则数据集市的建设应该遵循以下原则:1. 唯一性原则省级经营分析系统数据仓库是数据集市的唯一数据来源,数据集市的源数据皆来自省级经营分析系统数据仓库。2. 标准化原则数据集市的逻辑模型要求遵照经营分析系统数据仓库逻辑模型规范中有关数据集市的相关要求进行构建。3. 统一访问原则数据集市各项应用展现功能必须集成在经营分析门户中,并通过该门户进行访问。4. 功能复用原则充分利用经营分析系统现有功能(例如:营销支撑功能),提高经营分析系统现有功能的利用率,避免重复投资和建设。数据仓库对计费清单数据统一处理,只提供清单汇总信息,不提供计费清单数据
11、给数据及信息业务数据集市和集团客户数据集市。5. 整合集中原则数据集市为业务部门及地市分公司提供统一和完善的分析管理支撑,各业务部门及地市分公司的外围分析系统应逐步整合到数据集市中。6. 专业化原则按照分析专业化的原则,将各业务部门及地市分公司需求和应用转移到地市数据集市、数据与信息业务数据集市和集团客户数据集市上。4.4 数据集市定位数据集市是将数据仓库中的数据按照不同角度进行组织和存储的过程,主要负责地市级的业务,建立相应的业务主题。特点是数据粒度较粗,数据采取星型或雪花型结构,较少保留历史数据,便于访问分析和快速查询。数据集市具有面向特定用户群所需、合理的查询响应时间、便于扩展的特点。数
12、据集市定位如图 41所示。图 41数据集市定位图数据仓库主要负责企业级的决策,建立企业级的主题,仓库数据结构一般情况下满足第3范式,保留有较多的历史数据,可以进行海量数据的处理和数据探索。具有面向主题、集成、相对稳定、反映历史回馈变化的特点。地市数据集市是面向地市一线的业务应用平台。通过端到端的流程解决一线业务人员的实际问题。地市数据集市把仓库各个信息源中与一线人员有关的数据,按照不同的角度、不同的类型集中存放在一起,供一线业务人员查询或分发,从而为地市应用提供端到端的业务流程解决方案。部门数据集市是面向各个业务部门,围绕不同部门的业务问题集中支撑。部门数据集市把仓库各个信息源中与不同部门有关
13、的数据,按照不同的角度、不同的类型集中存放在一起,为业务部门提供运营支撑,从而为部门业务应用提供端到端的业务流程解决方案。5 系统架构数据集市作为省级经营分析系统的逻辑组件,从省级经营分析系统数据仓库中抽取相关数据进行转换和装载,并根据各自数据集市的逻辑模型规范构建形成数据集市,满足地市以及特定专业部门的个性化应用需求。数据集市以数据封装方式向省级经营分析系统客户分析及运营模块中的营销与服务管理提供营销目标客户群,为市场营销提供支撑。本章主要描述各数据集市的体系架构。5.1 地市数据集市架构5.1.1 体系结构地市数据集市体系结构遵循省级经营分析系统整体体系结构,其功能实体分布在经营分析系统总
14、体框架的数据层、功能层、应用层中,如图 51所示。图 51地市数据集市体系结构5.1.1.1 数据获取地市数据集市通过数据抽取、转换和加载过程从数据仓库获取数据,另外,地市集市支持从外部系统中直接导入格式化的数据,导入数据的格式可以根据具体的数据信息内容进行灵活支撑。关于数据获取接口说明详见第Error! Reference source not found.章。5.1.1.2 数据层数据层实现面向地市的数据集中存储和管理,形成与省级经营分析系统数据仓库相对独立的数据集合。数据层数据主要包括基础数据中参与人主题、服务主题、资源主题和帐务主题等明细数据、汇总数据中的日汇总、月汇总数据(例如KPI
15、、报表、客户统一视图等)。地市数据集市的数据模型包括针对数据集市底层细节数据的实体-关系逻辑数据模型、针对汇总数据的逻辑模型和针对信息子层的逻辑模型,模型的详细描述参见中国移动省级NG2-BASS3.0技术规范逻辑模型分册。5.1.1.3 应用层地市数据集市应用层组合包装集市中的各类分析应用,针对一线业务人员具体问题,建立基于角色的端到端解决方案。在地市数据集市的应用层中建立信息适配子层,通过对不同角色信息适配解决方案的描述,为地市数据集市使用人员定制了不同的应用支撑方案。实现将地市数据集市的各类应用,以合适的方式,通过合适的渠道,提供给合适的角色。在地市数据集市的应用层中提供中高端离网监控预
16、警、恶意欠费风险监控预警、重点KPI指标监控预警、自助报表和区域客户精确细分等应用。5.1.1.4 访问层经营分析门户是地市数据集市访问的统一入口。访问层实现KPI展现、报表展现等功能,并利用经营分析门户提供的信息推送功能,通过短信、彩信或邮件等多种方式,使一线业务人员更方便地获取经营分析系统的信息,提升经营分析系统的全员支撑能力。地市数据集市的各项应用应遵循中国移动省级NG2-BASS技术规范总册V3.0.0中“经营分析门户”章节对经营分析门户应用嵌入的开发要求,集成在经营分析门户中。地市数据集市各类用户通过统一的经营分析门户访问地市数据集市应用。5.1.2 实现方式根据各地市分公司的实际情
17、况,中国移动经营分析系统地市数据集市可以采用物理集中和物理分布两种实现方式。5.1.2.1 物理集中物理集中的方式是指地市数据集市的物理设备集中部署在省公司,与省级经营分析系统数据仓库通过省公司核心局域网进行数据传输,地市分公司用户通过中国移动现有传输网对数据集市进行访问。地市分公司可以根据实际情况建设单独型数据集市(单独型数据集市是指一个地市分公司单独建设、单独使用的数据集市)或者联合型数据集市(联合型数据集市是指几个地市分公司联合建设、资源共享、单独使用的数据集市)。5.1.2.2 物理分布物理分布的方式是数据集市的物理设备部署在地市分公司,各地市数据集市为单独型数据集市,与省级经营分析系
18、统数据仓库通过现有传输网进行数据传输,地市分公司用户对数据集市的访问通过地市分公司核心局域网进行。5.2 数据及信息业务数据集市架构5.2.1 体系结构数据及信息业务数据集市体系结构遵循省级经营分析系统整体体系结构,其功能实体分布在经营分析系统总体框架的数据层、功能层、应用层中,如图 52所示。图 52数据及信息业务数据集市体系结构5.2.1.1 数据获取数据及信息业务数据集市通过数据抽取、转换和加载过程从数据仓库获取数据,另外,数据及信息业务数据集市支持从外部系统中直接导入格式化的数据,导入数据的格式可以根据具体的数据信息内容进行灵活支撑。关于数据获取接口说明详见第Error! Refere
19、nce source not found.章。5.2.1.2 数据层数据层实现面向数据及信息业务数据集市数据的集中存储和管理。数据层包括基础数据中参与人主题域、服务主题域、资源主题域、帐务主题域和事件主题域的日志等明细数据,也包括日常分析所涉及的汇总层的汇总数据和面向应用并对其他系统提供数据支撑的信息子层数据。数据及信息业务数据集市的数据模型包括针对底层细节数据的实体-关系逻辑数据模型、针对汇总数据的逻辑模型和针对信息子层的逻辑模型,具体内容参见中国移动省级NG2-BASS3.0技术规范逻辑模型分册。数据层中的内容按照经营分析系统与VGOP的接口需求,通过数据封装的形式将客户画像信息和数据及信
20、息业务历史统计分析信息提供给VGOP。具体信息参见中国移动省级NG2-BASS3.0技术规范外部接口分册中“互动接口”章节。5.2.1.3 应用层数据及信息业务数据集市应用层将集市中的各类分析应用组合包装成个性化解决方案,提供给不同的使用对象,使数据及信息业务数据集市更好地支撑数据及信息业务运营,满足数据及信息业务精准化营销需求。在数据及信息业务数据集市的应用层中提供数据及信息业务资费营销案推荐、数据及信息新业务推荐等应用。5.2.1.4 访问层经营分析系统门户是数据及信息业务数据集市访问的统一入口。数据及信息业务数据集市的各项应用应遵循中国移动省级NG2-BASS技术规范总册V3.0.0中“
21、经营分析门户”章节对经营分析系统门户应用嵌入的开发要求,集成在经营分析系统门户中。数据及信息业务数据集市利用经营分析系统门户提供的信息推送功能,通过短信、彩信或邮件等多种方式,对业务部门人员提供便捷的信息支撑。5.2.2 实现方式数据及信息业务数据集市采用物理数据集市实现方式。物理数据集市是指在省级经营分析系统中建立物理独立的数据集市。数据及信息业务数据集市遵循数据及信息业务数据集市逻辑模型的要求,从数据仓库抽取数据。5.2.3 数据及信息业务数据集市和VGOP的关系参见中国移动省级NG2-BASS多OP能力交互分册。5.3 集团客户数据集市架构5.3.1 体系结构集团客户数据集市体系结构遵循
22、省级经营分析系统整体体系结构,其功能实体分布在经营分析系统的数据层、功能层、应用层中,如图 53所示。图 53集团客户数据集市体系结构5.3.1.1 数据获取对于物理集市实现方案,集团客户数据集市的数据需要通过清洗、转换和加载的过程从数据仓库中获得数据。而逻辑集市实现方案则不存在数据获取过程,数据集市直接通过视图、表或应用集成的方式访问数据仓库的数据。关于数据获取接口说明详见第Error! Reference source not found.章。5.3.1.2 数据层数据层实现面向集团客户应用数据的集中存储和管理。数据层包含集团客户/用户基本资料、业务受理信息、客户服务信息、帐单信息和渠道信
23、息等基础数据,也包含满足分析人员和决策人员统计分析需要的汇总数据。集团客户数据集市的数据模型包括针对底层细节数据的实体-关系逻辑数据模型和针对汇总数据的逻辑模型,具体内容参见中国移动省级NG2-BASS技术规范逻辑模型分册(v3.0)。对于逻辑集市方式建设的集团客户数据集市,其数据存储在数据仓库中。5.3.1.3 应用层集团客户数据集市应用层将集团客户数据集市中的各类分析应用组合包装成个性化解决方案,提供给不同的使用对象,使集团客户数据集市更好地支撑集团客户业务运营,满足集团客户业务精准化营销需求。在集团客户数据集市中提供两项重点应用支撑,包括集团客户关键指标提升、集团信息化重点业务收入提升。
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 地市 数据 集市 技术 体制 详述
链接地址:https://www.31ppt.com/p-1941530.html