数智化转型网szhzxw.cn 数字化转型网专题栏目 主数据管理实施阶段包含哪些?

主数据管理实施阶段包含哪些?

数字化转型网数据专题将关注数据治理、数据质量管理、数据架构、主数据管理、数据仓库、元数据管理、数据备份、数据挖掘、数据分析、数据安全、大数据、数据合规、等数据相关全产业链相关环节。

主数据管理实施共分为项目规划、现状分析、治理保障、平台建设、存量清晰、数据集成、外围变更及运营分析七个阶段,涉及25个实施步骤,如下图所示:

1、项目规划

(1)获得高层支持

对于公司的大多数主数据,虽然可能存在不一致,但大多时候问题并不严重,因为如果不一致问题已经严重影响到了生产,业务肯定是要强力介入并进行解决的,比如立个项,主数据的大多数问题在业务从0到1的建设过程中就已经基本解决了。

因此,很多主数据问题是业务当前还能容忍,但长远来讲成本可能很高的问题,也就是重要而不紧急的事情,考虑到各个部门屁股决定脑袋的特点,主数据存在着天然的驱动力不足的问题。那么谁最会考虑这种重要而不紧急的事情呢,谁又会考虑这种全局和局部的问题呢,显然是公司的高层。因此,主数据的业务驱动一定首先来自公司高层,只要高层不觉得痛,跨领域的长期积累的主数据问题就很难实质性解决,获得高层支持是主数据管理实施的第一推动。数字化转型网www.szhzxw.cn

(2)确定项目范围

一个企业主数据会有很多,如果一次把所有主数据都管起来,工作量会很大,周期会很长,通常主数据会分2-3年去完成,并持续优化。这时候,主数据范围确定就很重要,给每个主数据排个优先级,企业最需要统一的、标准化程度高,基础好的、数据一致性好的、数据量可控的都是排序依据,最终根据优先级,我们分步建设主数据,这样可按期看到阶段性效果,便于项目推进。

(3)组建项目团队

一般会设置公司领导小组,组长由管理层担任,副组长由各部门的数据责任人担任,领导小组负责主数据项目总体工作推进,制定总体工作思路和目标,协调各部门间项目推进过程中遇到的问题,确保项目的顺利执行。数字化转型网www.szhzxw.cn

领导小组一般会下设工作小组,工作小组组长一般由企业数据管理组织的相关负责人担任,成员包括企业数据管理组织人员及各领域的数据专员,负责主数据项目的具体实施,开展相关能力建设和运营。根据自己的经验,一般会设置几个专业组协同推进,以下是一个示例供你参考:

业务需求组:负责主数据相关业务流程梳理和业务管理规范的制定,明确主数据需求

系统架构组:负责主数据系统整体架构的设计,确保架构合理、满足各域生产应用需要

平台建设组:负责推进主数据系统建设工作,实现主数据库、对外数据服务、数据稽核等关键能力

数据架构组:负责推进各领域系统现有主数据的整合,形成一份统一的公司标准主数据

各领域改造组:负责本领域系统的改造工作,确保与主数据系统的顺利对接

(4)制定项目计划

主数据项目由于涉及到多部门协同,进度控制比较难,因此一定要通过项目启动会等形式明确项目计划,大量的主数据项目由于前期缺乏承诺导致后期扯皮的产生,除了事前的项目计划,事中也要采取通报等形式进行过程控制,及时发现问题并升级。数字化转型网www.szhzxw.cn

2、现状分析

(1)沟通需求痛点

第一、调研业务需求,包括哪些业务需要主数据支撑,对主数据有什么要求和期望,第二、了解业务流程,包括业务如何办理(如填表,工单),如何流转(如是否需要审批),第三、了解业务应用,基于主数据有哪些业务场景。下图显示了家宽业务受理流程中涉及的地址主数据查询和录入情况。

(2)评估系统数据

第一、调研主数据目前分布在哪些系统中,未来使用主数据的系统有哪些,第二、主数据有哪些属性字段,数据关系如何,数据质量怎样,第三、当前系统改造难易度,支撑哪种方式对接。下图显示了地址主数据查询和录入涉及的相关系统。数字化转型网www.szhzxw.cn

(3)确定改造内容

基于现状分析,可以确定存在的问题和改进点,分析出用户对主数据建设的需求,包括管理体系、系统架构、业务流程、数据标准、数据质量、数据平台等方面。

3、治理保障

(1)制定标准体系

主数据标准是主数据管理工作的核心内容。通过主数据标准,才能实现跨组织、跨部门、跨流程、跨系统的数据集成和共享。主数据标准也是打通企业横向产业链和纵向管控的数据基础。

主数据标准一般分为三类:数据标准,管理标准和服务标准,但主数据标准体系的建设要适合企业的业务,适应企业的发展。标准的建设不能“先入为主”更不能“直接照搬”。

数据标准:主要明确主数据的编码规则、分类标准、命名规范、编码颗粒度、属性规范、主数据模型标准等,下图示例了物料主数据模型和属性描述规则。数字化转型网www.szhzxw.cn

管理标准:主要明确组织、制度、流程、应用等管理规范及标准,比如明确各方职责,规范主数据的申请、变更及修改流程。

服务标准:明确主数据集成服务接口规范,包括集成技术规范、开发规范、外围系统接入规范等。

(2)建立组织保障

企业要建立主数据管理组织,确定主数据工作的相关各方的责任和关系,包括确定主数据过程中的决策、管理、执行等活动的参与方和负责方,以及各方承担的角色和职责等,如下图所示:

主数据管理组织目标是:统筹规划企业的数据战略;建立主数据标准规范体系、数据管理制主度和流程体系、数据运营和维护体系;依托主数据管理平台,实施主数据标准化落地、推广和运营。在明确了组织机构的同时,还要明确主数据管理岗位,主数据管理岗位可以兼职,也可以全职,根据企业实际情况而定。

(3)设计制度流程

制度章程是确保对主数据管理进行有效实施的认责制度。建立主数据管理制度和流程体系是需要明确主数据的归口部门和岗位,明确岗位职责,明确每个主数据的申请、审批、变更、共享的流程。

4、存量清洗

(1)明确清洗方法数字化转型网www.szhzxw.cn

基于主数据标准,对各来源历史数据进行分析,明确数据采集、标准化、内容清洗及合并等方法,比如下图示例了采用空间聚类、地址相似度等方法来实现相同地址合并。

(2)进行数据清洗

归集历史数据并实施数据清洗,通过数据清洗保证主数据的唯一性、准确性、完整性、一致性和有效性,然后通过系统校验、查重及人工比对、筛查、核实等多种手段对主数据代码的质量进行检查,最终形成一份高质量的主数据代码库。

(3)完成数据发布

完成主数据代码库评审并发布到生产环境,同时做好主数据代码库与源数据的映射,为外围割接做好准备。数字化转型网www.szhzxw.cn

5、平台建设

主数据管理平台是数据标准落地的载体,也是实现主数据统一标准、统一规则的支撑,还是有效实施主数据全生命周期管理和数据服务的平台,以及实现数据从产生到应用,分层协同、全面治理的核心。

(1)架构模式

主数据管理平台有多种架构类型,包括集中式架构、分布式架构、注册中心架构及混合架构,在选择主数据管理架构时,需要考虑企业的业务需求、技术基础设施、数据质量和安全性等因素。通常,一个好的MDM解决方案应该支持多种架构类型,并允许企业根据实际情况进行灵活配置和调整。

集中式架构(Centralized Architecture):

在集中式架构中,所有的主数据都存储在一个中心数据库中。企业各个业务系统通过API或其他集成技术访问和更新这个中心数据库。这种架构便于实现数据的一致性和标准化,但可能存在性能瓶颈和单点故障的风险。数字化转型网www.szhzxw.cn

分布式架构(Distributed Architecture):

在分布式架构中,主数据分布在多个数据库或系统中,这些数据库或系统可能位于不同的地理位置。数据通过数据集成技术(如ETL或消息队列)在各个节点之间同步。这种架构具有较高的可扩展性和容错能力,但实现数据的一致性和标准化较为复杂。

注册中心架构(Registry Architecture):

在注册中心架构中,主数据依然存储在各个业务系统中,而MDM平台只维护一个包含数据索引和映射关系的注册中心。这种架构避免了数据迁移和同步的复杂性,但需要实时查询和整合多个数据源,可能影响数据访问的性能。数字化转型网www.szhzxw.cn

混合架构(Hybrid Architecture):

混合架构结合了集中式、分布式和注册中心架构的优点,以满足企业的不同需求和场景。例如,对于关键和公共的主数据,可以采用集中式存储和管理;而对于分散和敏感的主数据,可以采用分布式存储和注册中心管理。

(2)管理数据模型

指基于主数据标准,提供主数据的结构、属性、关系、约束和规则的建模能力。

(3)进行数据整合

固化数据清洗方法,包括对接入的数据进行汇聚、清洗、转换、映射、去重、合并及加载,通过一系列的数据加工和处理形成标准统一的主数据。数字化转型网www.szhzxw.cn

(4)提供数据服务

指对外提供主数据的变更、订阅、查询、同步、分发、通知等服务。

(5)构建数据管理

指构建主数据管理流程,实现主数据的创建、变更、审核等运维功能。

6、外围集成

(1)变更业务流程

主数据建立后,各业务系统需要基于主数据的管理要求变更主数据录入、变更、查询等流程,重新明确相关角色和职责,并对相关人员进行培训,确保查询和录入的规范性,比如新的主数据管理系统提供了二种主数据的查询方式:

(2)进行数据集成

需要将主数据管理平台与各个目标业务系统进行集成,以实现主数据的申请、审核、分发等交互操作,从而最终实现主数据在多个系统之间的共享和统一。集成可以通过企业服务总线(ESB)方式,也可以通过Web Service和XML方式。

由于每个业务系统复杂性不一样,改造难度不一样,并不是每个系统都要按照一个标准去集成,比如历史数据各自如何清理、数据对照在哪里做、数据是主动推送还是订阅方式,最终往往通过多种集成方式,最终逐渐解决企业系统间的数据不一致问题。数字化转型网www.szhzxw.cn

下图给出了A系统(原来具备独立的地址管理能力)集成地址主数据的示例,共要做四个方面改造:

第一、A系统页面集成地址主数据系统的管理页面,调用地址主数据提供的API接口进行查询变更等操作,下线原来的地址管理模块。

第二、A系统新增与地址主数据系统的数据同步接口,保留一份地址主数系统的全量标准地址库副本,供A系统内部高效使用。

第三、由于地址主数据模型发生变更,A系统中原有的涉及地址数据的模型进行适配改造。

第四、A系统的下游要同步改造。数字化转型网www.szhzxw.cn

7、运营闭环

主数据管理项目的实施能够帮助企业初步建立起主数据的管理体系,但做好持续的运营工作,是发挥主数据价值的关键。有些项目实施过程很成功,但系统运行一段时间,比如半年、一年后,突然发现,主数据的质量已经回到了“解放前”。所以,实施主数据项目,只是数据治理的一个开始,企业要保持高质量的数据,必须持续的运营和不断的优化。

(1)确保标准执行

要建立主数据的运营管理团队,推动主数据管理相关制度的落地和优化,做到定岗定责、责任到人,对主数据新增、变更、使用等的流程进行监督和改进,确保规范执行到位。

(2)提升数据质量

主数据作为“黄金数据”是企业的核心数据资产,主数据质量的好坏决定了数据价值的高低,因此要建立一套主数据质量的运维体系,确保及时发现主数据的质量问题并闭环解决,如下示例了地址主数据的自动稽核流程:数字化转型网www.szhzxw.cn

(3)加强运营推广
主数据的应用接入无法一蹴而就,特别是对于集团型企业有很大难度,需要制定周密的推广计划,逐步推广到相关的业务系统中

声明:本文来自网络,版权归作者所有。文章内容仅代表作者独立观点,不代表数字化转型网立场,转载目的在于传递更多信息。如有侵权,请联系我们。数字化转型网www.szhzxw.cn

数字化转型网数据专题包含哪些内容

数字化转型网数据专题将关注数据治理、数据质量管理、数据架构、主数据管理、数据仓库、元数据管理、数据备份、数据挖掘、数据分析、数据安全、大数据、数据合规、等数据相关全产业链相关环节。

数字化转型网数据专题包含: 数字化转型网(www.szhzxw.cn)

1、数据相关外脑支持:100+数据相关专家、100+数据实践者、1000+相关资料

2、数据研习社:与全球数据相关专家、实践者共同探讨相关问题,推动产业发展!

3、国际认证培训:目前已引进DAMA国际认证CDMP,其他国内外认证也在逐步引进中

4、典型案例参考:与数字化转型网数据要素X研习社社员一起学习典型案例,共探企业数据落地应用

本文由数字化转型网(www.szhzxw.cn)转载而成,来源于讨厌的大鱼先生;编辑/翻译:数字化转型网Jack。

免责声明: 本网站(http://www.szhzxw.cn/)内容主要来自原创、合作媒体供稿和第三方投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。 本网站刊载的所有内容(包括但不仅限文字、图片、LOGO、音频、视频、软件、程序等) 版权归原作者所有。任何单位或个人认为本网站中的内容可能涉嫌侵犯其知识产权或存在不实内容时,请及时通知本站,予以删除。http://www.szhzxw.cn/53611.html
联系我们

联系我们

17717556551

邮箱: editor@cxounion.org

关注微信
微信扫一扫关注我们

微信扫一扫关注我们

关注微博
返回顶部