主数据管理系统和 ODS 的关系.docx

主数据管理系统和 ODS 的关系.docx

《主数据管理系统和 ODS 的关系.docx》由会员分享，可在线阅读，更多相关《主数据管理系统和 ODS 的关系.docx（15页珍藏版）》请在冰豆网上搜索。

主数据管理系统和ODS的关系

主数据管理介绍

前言

企业主数据是用来描述企业核心业务实体的数据，比如客户、合作伙伴、员工、产品、物料单、账户等；它是具有高业务价值的、可以在企业跨越各个业务部门被重复使用的数据，并且存在于多个异构的应用系统中。

本文将针对主数据管理的概念以及主数据管理解决方案的实施等方面跟大家作一个探讨。

主数据和主数据管理的概念

企业主数据可以包括很多方面，除了常见的客户主数据之外，不同行业的客户还可能拥有其他各种类型的主数据，例如：

对于电信行业客户而言，电信运营商提供的各种服务可以形成其产品主数据；对于航空业客户而言，航线、航班是其企业主数据的一种。

对于某一个企业的不同业务部门，其主数据也不同，例如市场销售部门关心客户信息，产品研发部门关心产品编号、产品分类等产品信息，人事部门关心员工机构，部门层次关系等信息。

数据管理的畴和主数据管理的概念

图1.数据管理的畴

如图所示，企业数据管理的容及畴通常包括交易数据、主数据以及元数据。

∙交易数据：

用于纪录业务事件，如客户的订单，投诉记录，客服申请等，它往往用于描述在某一个时间点上业务系统发生的行为。

∙主数据：

主数据则定义企业核心业务对象，如客户、产品、地址等，与交易流水信息不同，主数据一旦被记录到数据库中，需要经常对其进行维护，从而确保其时效性和准确性；主数据还包括关系数据，用以描述主数据之间的关系，如客户与产品的关系、产品与地域的关系、客户与客户的关系、产品与产品的关系等。

∙元数据：

即关于数据的数据，用以描述数据类型、数据定义、约束、数据关系、数据所处的系统等信息。

主数据管理是指一整套的用于生成和维护企业主数据的规、技术和方案，以保证主数据的完整性、一致性和准确性（“Thesetofdisciplines,technologies,andsolutionsusedtocreateandmaintainconsistent,complete,contextualandaccuratebusinessdataforallstakeholders（users,applications,datawarehouses,processes,companies,tradingpartners,customers,etc.）acrossandbeyondtheenterprise”）。

主数据管理的典型应用有CustomerDataIntegration—客户数据管理和ProductInformationIntegraiton—产品数据管理。

图2.主数据管理的信息流

一般来说，主数据管理系统从IT建设的角度而言都会是一个相对复杂的系统，它往往会和企业数据仓库/决策支持系统以及企业的各个业务系统发生关系，技术实现上也会涉及到ETL、EAI、EII等多个方面，如图2所示，一个典型的主数据管理的信息流为：

1.某个业务系统触发对企业主数据的改动；

2.主数据管理系统将整合之后完整、准确的主数据分发给所有有关的应用系统；

3.主数据管理系统为决策支持和数据仓库系统提供准确的数据源。

因此对于主数据管理系统的建设，要从建设初期就考虑整体的平台框架和技术实现。

以客户主数据为例，常见的主数据域包括：

∙Party：

参与方。

参与方包含的围是所有与企业发生了或者发生过正式业务关系的任何合法的实体，比如填写了投保单的参与方。

Party是分类别的，可以是个人、机构和团体。

对于Party来说，因为开展业务的需要，可能要对他们进行分级、分类，比如VIP，黑等。

个人包括个人基本属性、个人名称、职业、性别、教育等自然属性；机构是指在法律上有登记的组织实体，可以分为政府机构、商业机构、非盈利机构等类别；团体可以有多种形态，比如他们可以是家庭、兴趣小组、某个大机构中的一部分，或者通过某种数据分析技术得出的客户细分群体。

∙PartyRole：

参与方在业务中扮演的角色。

例如，对于保险行业而言，可以有：

投保人，被保人，受益人，担保人，报案人，核保人，查勘员，核赔人等。

∙Relationship：

Party与Party之间的关系,例如可以是：

夫妻关系、父子关系、母女关系、兄弟姐妹关系、总（母）公司分（子）公司关系、企业事业单位隶属、上下级关系等。

∙Account：

帐户是客户使用企业服务的付费实体。

∙Location：

Location记录的是每个Party可能拥有的所有联系地址，地址的类别包括邮寄地址、email地址、电信联络地址等。

∙Contract：

Party与企业之间的契约。

主数据有几个鲜明的特点，其中包括：

它是准确的、集成的，其次它是跨业务部门的，再有就是它是在各个业务部门被重复使用的。

主数据管理的意义

图3.主数据管理的要素

如图3所示：

集成、共享、数据质量、数据治理是主数据管理的四大要素，主数据管理要做的就是从企业的多个业务系统中整合最核心的、最需要共享的数据（主数据），集中进行数据的清洗和丰富，并且以服务的方式把统一的、完整的、准确的、具有权威性的主数据分发给全企业围需要使用这些数据的操作型应用和分析型应用，包括各个业务系统、业务流程和决策支持系统等。

主数据管理使得企业能够集中化管理数据，在分散的系统间保证主数据的一致性，改进数据合规性、快速部署新应用、充分了解客户、加速推出新产品的速度。

从IT建设的角度，主数据管理可以增强IT结构的灵活性，构建覆盖整个企业围的数据管理基础和相应规，并且更灵活地适应企业业务需求的变化。

以客户主数据为例，客户主数据是目前企业级客户普遍面临的一个问题，在大多数企业中，客户信息通常分散于CRM等各个业务系统中，而每个业务系统中都只有客户信息的片断，即不完整的客户信息，但却缺乏企业级的完整、统一的单一客户视图，结果导致企业不能完全了解客户，无法协调统一的市场行为，导致客户满意度下降，市场份额减少。

因此，建立客户主数据系统的目的在于：

∙整合并存储所有业务系统和渠道的客户及潜在客户的信息：

一方面从相关系统中抽取客户信息，并完成客户信息的清洗和整合工作，建立企业级的客户统一视图；另一方面，客户主数据管理系统将形成的统一客户信息以广播的形式同步到其他各个系统，从而确保客户信息的一致；

∙为相关的应用系统提供联机交易支持，提供客户信息的唯一访问入口点，为所有应用系统提供及时和全面的客户信息；服务于OCRM系统，充分利用数据的价值，在所有客户接触点上提供更多具有附加价值的服务；

∙实现SOA的体系结构：

建立客户主数据系统之前，数据被锁定在每一个应用系统和流程中，建立主数据管理系统之后，数据从应用系统中被释放出来，并且被处理成为一组可重用的服务，被各个应用系统调用。

主数据管理系统与数据仓库系统的关系

主数据管理系统与数据仓库系统是相辅相成的两个系统，但二者绝不是重复的，也不是互斥的。

它们有很多共同之处：

∙首先二者对企业都具有相同的价值，可以减少数据冗余和不一致性、提升对数据的洞察力，二者都是跨部门的集中式系统；

∙其次二者都依赖很多相同的技术手段，都会涉及到ETL技术、都需要元数据管理、都强调数据质量；

∙第三就是二者建设手段类似，都需要数据治理的规作为指导、都需要不同系统、不同部门的协作、需要统一的安全策略。

但是，主数据管理系统和数据仓库/决策支持系统二者之间也存在很多不同：

∙处理类型不同：

主数据管理（MDM）系统是偏交易型的系统，它为各个业务系统提供联机交易服务，系统的服务对象是呼叫中心、B2C、CRM等业务系统；而数据仓库是属于分析型的系统，面向的是分析型的应用，是在大量历史交易数据的基础上进行多维分析，系统的使用对象是各层领导和业务分析、市场销售预测人员等；

∙实时性不同：

与传统的数据仓库方案的批量ETL方式不同，主数据管理系统在数据初始加载阶段要使用ETL，但在后续运行中要大量依赖实时整合的方式来进行主数据的集成和同步；

∙数据量不同：

数据仓库存储的是大量的历史数据和各个维度的汇总数据，可能会是海量的，而MDM存储的仅仅是客户和产品等信息。

虽然主数据管理系统和数据仓库系统异同共存，但是二者却有着紧密的联系，并且可以互为促进、互为补充。

举例而言，数据仓库系统的分析结果可以作为衍生数据输入到MDM系统，从而使MDM系统能够更好地为操作型CRM系统服务。

以航空公司为例，客户的主数据模型大致可以分为三部分：

首先包括客户基本信息和偏好信息。

∙客户基本信息：

o个人及公司信息

o消费者市场状况

o常旅客会员卡号，状态，及累计里程等

o客户间关系（个体-个体，个体-公司）

o联系地址，包括，电子等

∙客户偏好信息：

o餐食偏好

o是否吸烟

o座位偏好

o机型偏好

o公务舱位偏好

o旅行舱位偏好

o休息室服务偏好

除了这两部分之外，我们还可以从数据仓库系统中提取相关的信息，作为客户主数据的衍生信息部分，从而更好地、全方位地描述客户特征，这些可以包括：

∙衍生信息：

o本月飞行里程

o年度飞行里程（最近12个月）

o提前预订倾向

o习惯预订模式

o使用自主服务倾向

o上次预订使用的信用卡号

o累计/本月转签/取消航班次数

o转签航班倾向

o取消航班倾向

oNoShow倾向等。

主数据管理系统和ODS的关系

在某些情况下，主数据管理系统和ODS系统可能容易被混淆，的确，从实时上来看，主数据管理系统和ODS系统存储的都是实时数据，但是二者存储的数据容是全然不同的，主数据管理系统中不存储交易数据，比如银行客户的交易流水信息是不应该放在主数据管理系统中进行管理的，这与MDM与ODS的一个很大区别。

举一个航空公司的例子，比如某个客户在电子商务上定了一机票，产生一个订单，然后他又通过呼叫中心要求改签，这个场景中，两个系统之间要实现客户信息和订单信息的共享，其中客户信息共享通过MDM系统来实现，而订单信息则需要采用ODS或其它手段进行共享，我们是不推荐把此类信息交由MDM系统来管理的。

主数据管理解决方案介绍

目前业界比较常见的主数据管理解决方案主要可以分为三类：

∙第一是依托专业套装软件来实现主数据管理，这类方案是作为套装软件的一部分，主要是为套装软件的其它模块提供服务的，因此，通常功能都缺乏完善性。

∙还有一类是侧重于分析型应用的主数据管理，这类方案在数据实时同步以及面向交易型应用时通常缺乏整体方案的完整性。

∙再有一类就是专注于主数据管理的中立的、完整的解决方案，这一类应用独立于套装软件，不仅具有整体架构的完整性和先进性，从功能上讲往往也最为完善，除了具有比较完整的数据模型（DataModel）之外，还会提供广泛的集成性，具备先进的机制实现数据同步，并且可以对外提供多种预置的主数据服务被外部交易系统调用，从而使系统具有很强的实时操作性，同时还强调主数据管理、主数据质量控制以及主数据维护的手段和规性。

企业主数据管理系统逻辑架构

一个完整的主数据管理解决方案的逻辑架构应如下图所示：

图4.主数据管理系统逻辑架构

在一个完整的主数据管理解决方案中，除了主数据管理的核心服务组件之外通常还会涉及到企业元数据管理、企业信息集成、ETL、数据分析和数据仓库以及EAI/ESB等其他各种技术和服务组件。

其中主数据管理服务又包括如下一些主要的服务组件：

∙