企业主数据管理技术白皮书.docx
《企业主数据管理技术白皮书.docx》由会员分享，可在线阅读，更多相关《企业主数据管理技术白皮书.docx（59页珍藏版）》请在冰豆网上搜索。
企业主数据管理技术白皮书
企业主数据管理技术白皮书
主数据是数据之源，是数据资产管理的核心，是信息系统互联互通的基石，是信息化和数字化的重要基础。
党的十九大报告提出“推动互联网、大数据、人工智能和实体经济深度融合”。
以大数据为代表的新技术得到迅猛发展，并渗透到各行各业，企业信息化也快速回归到数据的本身。
企业家使用数据整合劳动力、土地、资本三种生产要素进行数字化转型。
为了加快实体经济数字化转型，促进新一代信息技术与实体经济深度融合，发挥数据对企业转型升级的重要作用，数据资产管理应运而生。
主数据是指满足跨部门业务协同需要的、反映核心业务实体状态属性的企业（组织机构）基础信息。
主数据意义一是建立企业基础数据共享“语言”，打破各系统信息交互壁垒，可以支撑客商、物料、设备、指标等重要基础数据能够在多个系统内充分共享、高度复用；二是通过制定主数据标准，在系统建设中规范使用数据标准，进而为业务报表编制、数据统计分析提供基础条件；通过主数据建设，将为企业在数据应用与管理奠定基础。
主数据管理是一系列规则、应用和技术，用以协调和管理与企业的核心业务实体相关的系统记录数据。
主数据管理重要性是消除数据冗余；提升数据处理效率；提高公司战略协同力。
在数据资产管理的领域里，主数据的管理是最为基础的部分，因为主数据是可以跨业务、跨组织、跨系统被重复利用的数据，通过构建准确、唯一、权威的数据来源建立企业主数据标准管理体系，是提高企事业单位数据质量和数据资产价值的关键因素。
然而主数据的管理还处于摸索阶段，面临诸多挑战。
一是认识不统一，
领导不重视。
主数据的概念尚未得到广泛普及，企事业单位对主数据管理不够重视，缺乏顶层设计。
二是各自为政，标准不统一。
企事业单位内部难以在标准和规则层面达成一致，主数据代码难统一。
三是历史包袱重，落地实施难。
各企事业单位中存在着信息系统庞杂、建设年代跨度久远等问题，一些早期的系统数据标准化程度不高，数据清洗难、改造成本高，给主数据应用集成带来较大的困难。
四是通用基础主数据开放性差，获取困难。
行政区划、城市代码、功能地点代码等通用基础主数据缺乏高质量的数据来源和便捷可靠的获取渠道。
图表目录
图1主数据与元数据、交易数据的关系5
图2主数据管理工具功能架构15
图3主数据实施要点17
图4国投集团主数据建设总体架构28
图5国投集团主数据建设蓝图30
图6中国外运主数据标准体系33
图7中国外运主数据管理工具功能架构33
图8主数据管理路线图36
图9新兴际华集团主数据建设阶段41
图10新兴际华集团主数据管理系统应用集成方案43
图11延长石油主数据项目实施方案46
图12一重集团主数据管理系统集成对接情况51
图13振华重工MDG一期项目实施时间表53
图14振华重工主数据标准管理流程54
图15北京燃气集团数据资源管理体系64
图16某省数据实现方案78
图17数据管理治理平台81
表1主数据管理评价考核指标14
VI
一、主数据管理概述
党的十九大报告提出要“推动互联网、大数据、人工智能和实体经济深度融合”。
中共中央总书记习近平主持中共中央政治局就实施国家大数据战略学习时强调“大数据发展日新月异，我们应该审时度势、精心谋划、超前布局、力争主动”。
进一步突出了大数据作为国家基础性战略性资源的重要地位，掌握丰富的高价值数据资源日益成为抢占未来发展主动权的前提和保障。
伴随着大数据的深入推进，数据的资产化成为日益明显的趋势。
越来越多的企业正在将数据考虑为资产，甚至有人建议将其计入资产负债表。
但是对比实物资产，对于数据资产的管理还处于非常原始的阶段。
企业数据资产管理仍然存在数据质量难以保障、数据垃圾难以处理、数据转化效率低下等管理痛点。
如何充分挖掘发挥数据价值的方法论和参考框架是关键问题也是难点问题。
科学的数据资产管理模式对于企业具有非常重要的意义。
现有的方法多种多样，其中“主数据管理”是数据资产管理实践方式的重要切入方法之一，其建设策略是从解决核心业务实体数据的质量和业务协同入手，推动生产环节在客户、物料、组织机构、产品、统一编码等方面保持一致。
从主数据入手开展数据资产管理实践目标明确、建设周期较短，还能够保障关键数据的唯一性、一致性及合规性。
从IT建设的角度，主数据管理可以增强IT结构的灵活性，构建覆盖整个企业范围内的数据资产管理基础和相
应规范，并且更灵活地适应企业业务需求的变化。
此外，主数据质量的提高也能够为后期数据集成和数据整合打下良好的基础。
主数据及主数据管理建设模式存在一定的难点和挑战，如主数据管理进程需要修改现有的相关生产业务过程和系统，需要从管理学的角度充分调动业务部门密切配合。
主数据管理模式要求业务间有表单数据交换，因此短期内会使得信息架构发生变化，甚至变得更加复杂。
主数据及主数据管理建设模式对组织的业务运营效率和信息决策周期要求较高。
政府政务、能源化工、装备制造、交通物流、医疗、综合性投资企业等不同行业往往需要处理来自组织内不同业务单元、专业领域、信息系统的主数据问题，关注数据密集关键部位的业务运作状态，对关键事件和责任进行追溯，此外该类企业还关注企业的关键生产环节（如：
制造、生产、技术等）的效率提升、扩展性和灵活性。
因此，企事业单位大量采用以主数据管理为核心的管理实践模式来实现数据资产管理。
为了使读者更加理解白皮书的内容，本章首先阐述主数据及主数据管理的内涵、分类与重要性。
（一）什么是主数据
1.主数据定义
主数据（MDM：
MasterData）：
指满足跨部门业务协同需要的、反映核心业务实体状态属性的组织机构的基础信息。
主数据相对交易数据而言，属性相对稳定，准确度要求更高，唯一识别。
主数据具有以下几个方面的特征：
①超越部门。
主数据不是那种局限于某个具体职能部门的数据库。
主数据是满足跨部门业务协同需要的，是各个职能部门在开展业务过程中都需要的数据，是所有职能部门及其业务过程的“最大公约数据”。
②超越流程。
主数据不依赖于某个具体的业务流程，但却是主要业务流程都需要的。
主数据的核心是反映对象的状态属性，它不随某个具体流程而发生改变，而是作为其完整流程的不变要素。
③超越主题。
与信息工程方法论①中通过聚类方法选择主题数据不同，主数据是不依赖于特定业务主题却又服务于所有业务主题的有关业务实体的核心信息。
④超越系统②。
主数据管理系统是信息系统建设的基础，应该保持相对独立，它服务于但是高于其它业务信息系统，因此对主数据的管理要集中化、系统化、规范化。
⑤超越技术。
由于主数据要满足跨部门的业务协同，因而必须适应采用不同技术规范的不同业务系统，所以主数据必须应用一种能够为各类异构系统所兼容的技术条件。
从这个意义上讲，面向微服务架构为主数据的实施提供了有效的工具。
此外，业内对主数据还有其他定义和解释。
国家标准GB/T36073-2018
《数据管理能力成熟度评估模型》中对主数据的定义是“主数据是组织中需要跨系统、跨部门进行共享的核心业务实体数据”③。
IBM公司在其有关主数据管理的红皮书《MasterDataManangement:
RapidDeploymentPackagefor
①高复先，《信息资源规划——信息化建设基础工程》
②王波等，通过标准化主数据实现高校数据交换，《管理技术》，2008年第12期。
③国家标准GB/T36073-2018《数据管理能力成熟度评估模型》
MDM》认为，所谓主数据是有关客户、供应商、产品和账户的企业关键信息；有观点将主数据定义为“表示‘跟踪事物状态’的数据”④。
国际数据管理协会（DAMA，DataManagementAssociationInternational）在2009年发布的数据管理知识体系DMBOK1.0对主数据作了如下定义：
主数据是关于业务实体的数据，这些实体为业务交易提供关联环境。
业务规则通常规定了主数据格式和允许的取值范围。
主数据是关于关键业务实体的权威的、最准确的数据，可用于建立交易数据的关联环境。
主数据值被认为是“黄金”数据⑤。
主数据与组织机构的业务性质密切相关，因而不同的业务组织所需要的主数据存在着显著差异。
例如，对于ERP系统的客户，供应商、物料、BOM（BillOfMaterial）、产品、合同、订单等都应该是最基础的数据；对于项目管理系统，项目信息则是最基本的基础数据；而对于CRM系统，销售项目是最基本的基础数据。
下面是物料主数据的例子。
什么是物料主数据？
设备物资包含企业工程项目建设、投资、日常业务运行管理等各方面涉及到的设备物资，按照企业行业的物料特点制定分类原则。
（1）编码原则：
简单性、唯一性、分类合理性、可扩展性
（2）代码结构：
物料分类结构通常可以分为三层，即大类、中类、小类。
分类代码采取等长数字型层次结构代码方式，表示物资的大类、中类和小类
（3）分类原则：
一是以最稳定的本质属性或特征作为分类的基础和依据。
二是通常以自然属性为第一分类原则，适当考虑用途和管理的方便。
三是应满足科学性、稳定性、分类清晰、不交叉不混淆的要求。
（4）物料描述规则
物料描述是区分不同物料的依据，是判断新增条目重复性的唯一判断条件。
所以科学、合理的描述规则，是保证“一物一码”的前提条件，其对于整个信息代码编码体系的长期稳定运行至关重要。
物料描述模版是具体物料描述规则的定义，主要解决物料描述的规范化问题。
包括物料主要自然属性的确定、取值范围和相互关系。
大部分小类一个小类对应一个模板，有些小类可能共用一个模板或一个小类对应几个模板。
④IBM公司红皮书《MasterDataManangement:
RapidDeploymentPackageforMDM》
⑤TheDAMAGuidetotheDataManagementBodyofKnowledge
2.主数据和其他数据的关系
主数据及主数据管理往往和其他已有的概念混在一起，从而影响人们对主数据与主数据管理的本质的认识。
本文已经在前面就主数据的概念进行了分析，为了加深理解，将分析主数据与元数据、主数据与交易数据这两个概念的区别和联系。
图1主数据与元数据、交易数据的关系
（1）主数据和元数据
主数据和元数据是两个完全不同的概念。
元数据是指公司数据资产管理的基础，是关于“数据的数据”，例如数据类型、数据定义、数据关系等，相当于数据表格中的表头信息，是一个相对客观的概念。
而主数据是从元数据中挑选出来的，表征公司业务运行的关键、通用型数据，是一个相对主观的概念。
它不仅仅只是表头信息，而是包括实例数据。
例如公司的产品列表、客户列表、分公司地址信息等。
（2）主数据和交易数据
交易数据也是基于元数据衍生而来的，反应公司实时业务记录的数据，同样是实例数据。
主数据是相对稳定的，静止不变或者是一段时间内静止不变的数据，而交易数据则是实时变化的数据，往往描述的是某一个时间
点所发生的交易行为。
例如客户订单、存货跟踪、销售记录、售后事件等。
一个主数据可能会跟多个交易数据有关联，而一个交易数据可能又会对主数据产生影响。
举例来说，航空公司中，“客户本年度飞行里程”是一个主数据，而“客户每次飞行记录”，则是交易数据，当交易数据“客户每次飞行记录”累积到一年时，主数据“客户本年度飞行里程”便会产生更新。
3.主数据的类型
主数据主要包括配置型主数据和核心主数据。
具体说明如下：
（1）配置型主数据
配置型主数据是描述业务或核心主数据属性分类的参考信息，会在整个组织内共享使用。
一般依据国际标准、国家标准、行业标准或企业标
升级会员 