集团型企业主数据建设与治理初探

2020-06-30 14:59盛敏
企业科技与发展 2020年3期
关键词:数据治理数据质量

盛敏

【摘 要】在企业信息化向数字化转型过程中,需要流程改造和数据集成,主数据建设与治理是必由之路和成功之基,尤其是大型集团企业,其分支机构众多,信息系统林立,数据分散且差异性大。统一的数据标准能够打破信息传递的壁垒,消除“信息孤岛”,实现数据的共享和资产价值,增强企业竞争力。文章着重阐述主数据的标准建设和治理实施,为企业提升数据管理水平提供参考。

【关键词】主数据;数据标准;数据质量;数据治理

【中图分类号】F270.7 【文献标识码】A 【文章编号】1674-0688(2020)03-0221-03

0 引言

随着大数据时代的到来,企业已经深刻意识到核心数据资源的价值,纷纷实施数字化转型。主数据作为业务运行和决策分析的数据标准,用来描述企业核心业务实体,是整个企业范围内的应用系统中最基本的单元,也是重复使用的高价值数据,经常存在于多个异构或同构系统中。主数据的建设和治理,可以保证业务数据的一致性、完整性、相关性及精确性,可以帮助企业从分散的信息系统中整合最核心、最需要共享的数据,集中进行数据清洗和完善,将准确、统一、完整且具有权威性的主数据分发给各系统或应用[1]。主数据形成的数据标准,规范了对各系统的共性数据管理,避免出现概念不一、来源分散、信息孤立,保证了系统之间的数据共享和互动,从而提高企业运营效益,提升数据质量,发挥数据资产价值,更好地为企业数字化转型奠定基础。

1 主数据的特征与价值

主数据作为企业基准数据,其来源准确、权威、统一,长期应用于企业的各信息系统之间,是企业执行业务操作和决策分析的数据标准[2]。

1.1 主数据的主要特征

{1}跨部门。主数据是组织内部共享的、超越各部门间的数据,既不归属于某一部门,又为组织内的各部门所共用,是企业的核心数据资产。{2}跨系统。主数据是应用系统建设的基石,是在多个系统之间进行共享的数据,同时是企业数字化转型和组织数据分析的重要对象。{3}跨技术。主数据在不同的实施环境和应用场景下,都是可以灵活应对的,主要解决了在不同异构系统之间的核心数据共享问题。主数据的集成架构是多样的,从来不会局限于一种特定的技术。{4}跨业务。主数据超越了业务的边界,是多个行业领域中被广泛应用的数据[3]。主数据来源于业务又应用到业务之中。一方面,主数据的核心属性来源于业务本质;另一方面,具体业务也赋予主数据的其他屬性。

1.2 主数据的价值体现

主数据自身所具备的高价值、高共享、高稳定性特点[4],为企业带来三大方面的价值。

(1)统一数据规范。通过主数据治理,可以让企业拥有统一的主数据访问接口,根据指定的主数据标准规范,获取集中、丰富和干净的数据,并建立统一、庞大的主数据库,向各成员单位、业务部门提供一致、完整的共享信息平台,为企业日常经营和决策提供了一个标准化的支撑载体。

(2)增强应用灵活性。主数据治理可以增强各信息系统之间结构的灵活性,尤其是集团型企业各成员公司的信息化缺乏统一规划,自成一派。主数据的治理能够有效构建覆盖整个企业范围的数据管理基础和相应规范,降低接口成本、数据清洗和维护成本,并灵活地适用于各信息化环境的不断变化。让企业能够远离数据冗余、标准不一致所带来的高成本和高风险。

(3)助力大数据。主数据和大数据的核心都是数据,但两者各有不同。大数据关注的是数据的属性、类型和体量,而主数据则更关注数据的质量;大数据为数据分析提供了源源不断的素材,而主数据侧重于数据的基础规范和标准。相比大数据而言,主数据是基础,通过主数据将大数据进行有效串联归集,利用算法模型,使企业获得高价值的数据应用效果。

2 集团主数据建设的路径设计

结合集团型企业的特点和业界成熟的建设案例,主数据的建设思路依次可划分为建立标准、连通数据、深挖价值3个阶段。

2.1 建立标准

主数据的标准化建设,能够实现关键主数据的管理制度。标准化的数据,使集团型企业各组织的信息系统遵循一套统一规范的数据标准。在建立标准阶段,核心的工作任务就是形成企业的《主数据标准规范》和建立唯一的主数据管理系统。《主数据标准规范》的建立可以为主数据的建设提供理论和制度保障。主数据管理系统的建设可以达到平台各异构系统的数据的标准化,并提供数据统一建模、多来源数据清洗、关联分析、数据分发、数据质量检验等功能[6]。对于来自各方的数据进行清洗和合并,对于某一来源数据进行分发和同步,对于其他来源数据则可利用可视化建模提供数据新增审核功能。“建立标准”阶段的意义在于,通过主数据管理,实现了数据标准化、管理标准化,这些基础工作的价值支撑了数据连通和价值挖掘[7]。

2.2 连通数据

依托统一的数据标准,基于统一的接口规范,实现集团本级内部及各成员公司间全范围的信息系统互联互通,高校共享。系统范围包括集团和成员单位的系统及同一组织的不同异构系统。在连通数据阶段,典型的建设任务就是完善在线流程,实现业务财务一体化。通过企业服务总线的建设达到各异构系统的标准化服务对接,达到了可插拔、低耦合的目标[8]。企业服务总线提供了服务标准化集成、数据集成转换采集、消息异步队列、统一监控运维等能力。“连通数据”阶段不仅实现了各系统间的打通、连接和共享,还直接体现了诸如业财一体化等业务层面的直接价值,并支撑了数据分析和价值挖掘。

2.3 深挖价值

基于前述两个阶段的建设,相互连通的规范的主数据可支撑大数据进行不同维度、不同用途和不同层面的深入应用建设,例如企业的精细化管控、整体战略制定、供应商价值分析、客户信用风险等。在深挖价值阶段,主要任务是建设支撑公司战略和领导日常经营决策的独特性要求的分析系统,其价值在于通过数据仓库建设,集成元数据、主数据、业务数据、系统数据,抽取、装载、转换、分析。基于标准化的数据,根据行业市场经验,建立算法模型,进行各类分析、核算、预判、管控、赋能工作,为集团的战略落地和战术执行提供有力支撑。

3 集团主数据治理的方案构思

3.1 治理框架

主数据的治理应以主数据的全生命周期管理为核心,并贯穿生命周期的各个阶段,包括产生、集成、存储、发布、维护、使用、归档。在产生阶段,需对产生规范及产生方式进行统一管理;在整合阶段,需对集成规范、集成机制等做统一管理;在存储阶段,需对存储系统、存储方式等做统一管理;在发布阶段,需对发布、共享机制等做统一管理;在维护阶段,需对维护规范、维护职责等做统一管理;在使用阶段,需对使用职责、使用监督等做统一管理;在归档阶段,需对归档机制及归档流程等进行统一管理。基于上述主数据全生命周期的各阶段管理要求,一方面,建立起主数据标准,并以此标准为依托构建整个数据质量管理体系,通过成熟的管理体系保障各管理模块的正常运行;另一方面,以技术架构为支撑确保数据标准、数据质量等治理策略的实施及数据的正常运营[9]。

3.2 治理内容

3.2.1 主数据的标准治理

主数据的标准治理,主要包括规定格式、约定规则、统一来源、规范结构、数据清洗5项内容。一是规定格式。需规定六大类主数据(集团型企业的主数据主要包括物料、供应商、客户、仓库、科目和组织体系六大类)的数据格式和编码规范,包括主数据信息项的名称格式、长度格式、类型格式、分级定义等。二是约定规则。需约定主数据之间的关联关系、约束规则,保证不同主数据间信息的完整性和一致性。三是统一来源。应规定主数据的唯一出处,杜绝主数据的来源渠道,保证主数据的准确性和唯一性。四是规范结构。规范主数据的属性、编码构成等,保证主数据信息的有效性和不冗余,确保主数据的规范性及完整。五是数据清洗。按照主数据标准规范,对各异构系统的存量数据做好数据清洗。

3.2.2 主数据的质量管理

主数据的质量管理,主要涵盖定义、评估、分析和实施4项工作。定义:需要对业务需求、方法及数据质量检查规则等进行定义,并设计评估方案。评估:按照唯一性、完整性、规范性、一致性、准确性和关联性等维度,对数据质量进行检查测评,并评估瑕疵数据对企业业务经营或技术实现所产生的影响程度。分析:分析影响数据质量的根本原因,例如技术落后、信息冗余、流程不标准和管理不严等,并区分这些原因对数据质量的影响级别,最终确定实施建议,为数据质量的管理制订改善方案。实施:一是改进数据质量问题,建立、维护主数据的质量管理方案;二是通过改进组织的管理流程,最大限度地杜绝由管理缺陷所造成的数据质量问题;三是对主数据本身和管理实施行为进行跟踪监控,最大限度地维護治理成果[9]。

3.3 治理方法

3.3.1 技术层面

对于主数据治理的技术层面而言,需重点做好以下4项工作:一是确定权限。确定主数据管理平台中各用户的角色权限,禁止一个用户多角色等一对多的情况,避免因权限的分配不当,而给主数据的质量及日常管理维护造成障碍。二是明确架构。主数据的技术架构,应能满足各项管理和维护功能需求,方便主数据内容的新增、扩展和分发等,在满足业务需求的同时保证主数据的完整性和准确性。三是约定接口。约定接口的开发者、使用者及接口的名称、参数等,制定接口标准,并严格按照接口规范执行,保证主数据的维护能在各异构系统间及时同步,确保主数据一致有效。四是确认关系。明确主数据管理平台及其数据标准、数据质量等规范,与其他数据管理平台的关联关系[10]。

3.3.2 管理层面

就主数据的日常维护管理来讲,应主要做好以下5项工作:一是树立标准。明确主数据管理标准规范,确保规范满足业务需求的同时具有可执行性,自觉提高意识,做到有标可依。二是建章立制。建立主数据使用和管理的相关制度,明确应用标准及范围,规范日常运维行为。三是确定组织。确定主数据全生命周期管理的组织机构,明确涵盖主数据生命周期各阶段管理的归口部门,确保对主数据范围全覆盖的管理控制。四是定义职责。明确主数据应用流程中各用户的职责,并制定和执行奖惩制度,直接有效地约束主数据用户行为,避免人主观怠慢及客观不专业等原因造成的主数据不准确。五是规范流程。规范主数据的申请、变更、修改、归档等流程,实行规范化管理与监督,确保流程的准确畅通,保证主数据的可靠性。

4 结语

主数据是企业数字化转型的奠基石,要实现大数据所带来的数据资产价值,就必须先做好主数据的建设和治理,尤其是集团型企业,主数据建设是一项涉及各个组织内成员、各类业务领域、各项信息系统和各种信息技术等多方面的系统性工作。企业应该从顶层设计之初就统筹考虑主数据的统一设计标准和规范,并做好治理实施,为今后各系统间数据的集成整合打好基础,推进主数据协同应用和资源共享。

参 考 文 献

1]邓林.主数据管理系统在大型企业中的应用[J].炼油与化工,2019(2):57-59.

[2]李智星,万磊,舒新义,等.公司主数据管理研究与思考[J].中国集体经济,2018(10):68-69.

[3]石秀峰.主数据的3个特点、4个超越和3个二八原则[EB/OL].https://blog.csdn.net/kuangfeng88588/artic-

le/details/88640276,2018-03-25.

[4]房俊彦.集团型企业的主数据管理[J].信息与电脑,2019

(2):157-158.

[5]亓东霞,马琳,张永京,等.企业业务主数据建设与应用研究[J].数字技术与应用,2019(6):82-83.

[6]欧志洪,胡天牧,康永.浅谈主数据管理应用问题治理[J].电子世界,2018(2):62-63.

[7]束进,牛渝,周巍伟.企业信息化建设中的数据管理[J].上海船舶运输科学研究所学报,2016(1):81-84.

[8]张政,李庆春.主数据在集团型企业的应用研究[J].中国管理信息化,2016(21):71-73.

[9]Annapei.主数据治理框架[EB/OL].https://blog.csdn.net/annapei/article/details/42493575,2015-01-17.

[10]王兆君,王钺,曹朝辉.主数据驱动的数据治理——原理、技术与实践[M].北京:清华大学出版社,2019.

猜你喜欢
数据治理数据质量
高校数据融合路径及其治理框架的探讨
基于本体的企业运营数据治理
云端数据治理初探
电子商务平台数据质量控制系统及仿真模型分析
强化统计执法提高数据质量
浅析统计数据质量
金融统计数据质量管理的国际借鉴与中国实践
浅谈统计数据质量控制
大数据治理模型与治理成熟度评估研究
大数据时代城市治理:数据异化与数据治理