数据分析行业知识分享|绝对干货！一文详解数据标准大数据行业资讯-美林数据

产品简介

美林新闻/NEWS

首页美林数据行业资讯

数据分析行业知识分享|绝对干货！一文详解数据标准

2022-11-14 17:07:43 次

制造企业在市场销售、设计、采购、生产、交付、货运等业务环节，存在大量的信息不规范、不对等、不及时的情况，导致主价值链业务流程不顺畅、滞后等。究其根本原因，除了业务系统确实需要搞集成外，还有一个重要的方面是，企业各业务环节、各业务部门、各业务系统对于同一套企业数据的数据标准从业务术语、业务字段、业务表单的定义以及字段命名的统一规范等方面存在差异。

上一篇文章，我们对数据架构设计的详细过程及方法、注意事项进行了介绍【数据治理科普：十年经验，终于把数据架构设计说清楚了】，接下来我们看看怎么统一企业数据语言，贯通业务流程。这篇文章我们来介绍什么是数据标准、为什么制定数据标准、数据标准包括什么内容、数据标准怎么用。

什么是数据标准
根据中国信通院的定义：数据标准，是指保障数据的内外部使用与交换的一致性和准确性的规范性约束。做好企业的数据标准，解决上述数据标准背的锅，首先要搞清楚企业数据是如何分类的。参照某工业集团发布的统一数据架构文件，遵循业务架构到数据架构设计思想，企业数据可分为主题分析数据、业务数据、主数据、参考数据。具体如下图所示，我们举一个例子来说明：

企业数据分类

总体思路，还是上篇讲到的，从企业业务入手，自上而下梳理企业有哪些业务，并划分业务主题域；基于各域的业务模型（业务流程）开始梳理业务环节的输入输出数据，基于输入输出数据识别【数据实体】，数据实体就是企业需要重点管理的数据资产内容之一，管理就需要先定义，所以有了描述数据的数据，也就是元数据的产生。
而在数据管理的过程中，我们发现，不同特点的数据我们侧重管理的数据内容不同，由此我们以业务为核心，将未来需要管理的数据实体，划分为业务数据、主题分析数据、主数据、以及参考数据。
►业务数据：又称交易数据，是业务活动产生的数据，比如销售订单；
►主题分析数据：用于主题分析的数据，比如，对销售订单，以产品为维度进行分析、以客户为维度进行分析等；
►主数据：通常是企业业务中的核心数据，是跨业务领域、跨流程和跨系统使用的数据，具有高的共享性、变化频率低的特点；比如，销售订单中销售的产品、销售的客户等；
►参考数据：需要对定义的域值进行控制，也叫静态数据；也具有共享性、相对稳定的特点；比如：销售订单中的行政区域、国家地区、产品型号等。
那么，与企业各类数据对应的，即各类数据的标准，分别是：数据元标准、指标数据标准、主数据标准、参考数据标准。在DCMM的数据标准中还包括业务术语标准。
►数据元主要是通过对企业中核心数据元进行标准定义，使数据的拥有者和使用者对数据有一致的理解。数据元可以理解为属性字段。比如：描述销售订单的销售部门、销售员、销售产品、产品单价、单品总价等均可以定义为数据元。
►指标数据是组织在经营分析过程中衡量某一个目标或事物的数据，一般由指标名称、时间和数值等组成。比如：产品年度销售额、客户季度订单量等。
►主数据是组织中需要跨系统、跨部门共享的核心实体数据。主数据管理是对主数据标准和内容进行管理，实现主数据跨系统的一致、共享使用。比如：A产品、B客户，是具体的主数据的内容，也需要标准的一致管理。
►参考数据是用于将其他数据进行分类的数据。参考数据管理是对定义的数据值域进行管理，包括标准化术语、代码值和其他唯一标识符，每个取值的业务定义，数据值域列表内部和跨不同列表之间的业务关系的控制，并对相关参考数据的一致、共享使用。比如：产品型号包括EP、FP、GP三种。
►业务术语是企业中业务概念的描述，业务数据是企业内部理解数据、应用数据的基础，需要推动业务术语的共享和组织内部的应用。业务数据可以是业务流转环节的术语、表单的术语、某一字段的术语、某一参考数据条目的术语等等，对理解数据应用数据过程中需要澄清的、界定的概念都可以定义为术语。

为什么定数据标准
数据标准管理通过对各个环节数据的定义、格式、值域范围、业务规则等进行维护及应用，帮助企业规范各环节对业务的统一理解，增强企业各部门对数据的定义与使用的一致性，实时贯通企业业务流程，精准监控业务运行情况。
以下图示以物料主数据标准梳理为例。物料在设计、采购、生产、质检、财务各环节的属性信息，存在命名不一致但内涵一致的较多情况，引发集成映射问题、信息不通畅问题等，最终需要对各环节使用的属性进行统一定义、统一规范来解决。图片

业务各环节中关于物料的属性信息

数据标准定什么

每类数据应该定义其标准，那么数据标准定什么，本质上是通过各类数据的元数据来落地数据标准。各类数据的元数据，根据所描述的业务和内容有所差异及侧重，如下图所示，我们把各类数据的元数据分为业务元数据、技术元数据、管理元数据，并分别进行了定义。

企业数据标准

►指标数据标准
指标数据是组织在经营分析过程中衡量某一个目标或事物的数据，一般由指标名称、时间和数值等组成。指标数据标准包括指标名称、指标含义、计算规则、数据维护责任部门等。比如，某销售订单占比指标的标准如下图所示：

指标数据标准

►数据元标准
业务数据，主要是通过对企业中核心数据元进行标准定义，使数据的拥有者和使用者对数据有一致的理解。比如，采购合同编号的数据元标准。

数据元标准

►主数据标准
主数据是组织中需要跨系统、跨部门共享的核心实体数据。主数据管理是对主数据标准和内容进行管理，实现主数据跨系统的一致、共享使用。主数据标准包括中英文名称、数据维护责任部门、制定依据等。比如，合同需要标准的定义，包括了合同的属性、编码规则、合同的分类、合同相关的参考数据、一些属性的质量规则，合同的权威数据源等内容。而且具体的合同有2102条存量数据，也需要按照定义的标准规范进行数据清洗整改，去除重复的数据、填补缺失的数据等，形成规范的数据，这个也是主数据管理范围内的工作；未来新增的合同数据，也需要按照规范的编码、质量规则等管理，确保数据的规范性。

主数据标准

企业主数据通常还包括人员、组织机构、客户、供应商、物料、产品、会计科目、工装工具、设备、夹量具等，我们都需从业务视角、技术视角、管理视角制定每类主数据的属性标准，也需要对各类主数据具体的内容（值）进行管理。原材料主数据属性确定的技术视角属性示例如下图所示：

►参考数据标准
参考数据是用于将其他数据进行分类的数据。参考数据管理是对定义的数据值域进行管理，包括中英文名称、参考数据维护责任部门、制定依据等。

参考数据标准

除了从业务视角及管理视角明确企业的参考数据标准外，仍需对每种参考数据从技术视角制定属性标准。具体的参考数据标准，除了定义参考数据外，还需要给出清晰的值列表内容。比如，设备属性中“账类别”枚举项的内容包括：

►业务术语标准
业务术语是企业中业务概念的描述，业务数据是企业内部理解数据、应用数据的基础。通过对业务术语的管理能保障组织内部对集体技术名词理解的一致性。通常从中文名称、英文名称、术语描述等业务视角，以及责任部门、数据维护部门描述。

业务术语标准

数据标准怎么用
数据标准落标涉及多部门、多系统的一系列复杂工作，需要企业领导的大力推动以及业务部门牵头，华为开展数据治理第一阶段工作，花了8年做数据标准及落地，并将落标作为了2015年企业7大重点战略任务之一。
各类数据标准的落地方案也有差异，其中：
数据元标准落地：主要与数据建模相关，涉及到已建系统、待建系统中模型的映射及引用等等；
主数据和参考数据落地：主要是数据内容的规范化及共享，包括确定SOR系统做共享、单独的主数据平台管理并做共享两种策略；
指标数据标准落地：主要是各业务部门、业务环节及管理层等需要对指标业务定义有共识，并能按照自己关注的维度查阅指标值及趋势等。
那么，详细的数据元标准如何落地到业务系统呢？
主数据和参考数据的落地与数据元有什么不同呢？
指标数据标准是单独的平台落地吗？
……

上一篇：大数据分析之数据缺失值处理教程来啦！下一篇：可视化分析图形怎么选？这篇指南手把手教你！数据可视化分析图形选择指南

Tempo大数据分析平台

Tempo商业智能平台

Tempo人工智能平台

Tempo数据工厂平台

Tempo数据治理平台

Tempo主数据管理平台

Tempo指标建设平台

自助式可视化分析

算法模型管理

指标管理解决方案

数字指挥中心

湖仓一体解决方案

智能场景应用构建

主数据应用监管

数据中台

发电

电网

制造

油气

煤炭

高校

政企

金融

科研院所

DCMM认证

DAMA认证

内容中心

帮助中心

美林数据

合作生态

美林新闻

行业资讯

产品简介

Tempo大数据分析平台

Tempo商业智能平台

Tempo人工智能平台

Tempo数据工厂平台

Tempo数据资产管理平台

Tempo主数据管理平台

相关推荐

美林新闻/NEWS

数据分析行业知识分享|绝对干货！一文详解数据标准

联系我们

400-608-2558 029-8869-6198

扫码关注我们

扫码立即咨询