数字化转型网数据专题将关注数据治理、数据质量管理、数据架构、主数据管理、数据仓库、元数据管理、数据备份、数据挖掘、数据分析、数据安全、大数据、数据合规、等数据相关全产业链相关环节。


主数据治理方法:摸家底、建体系、接数据、抓运营
1、摸家底
摸清企业现状,梳理企业现有主数据和数据管理程度。
2、建体系
建立主数据组织体系、数据标准体系、制度与流程体系、主数据技术体系、主数据安全体系。
3、接数据
主数据管理实操阶段。数字化转型网www.szhzxw.cn
包含数据接入、数据清洗和数据应用三个阶段。

数据接入
主数据接入是将主数据从数据源系统接入并汇集到主数据平台的过程。该过程用到的技术有很多, 常见的有ETL抽取、 文件传输、 消息推送、 接口推送等。
方案一:数据转换映射
常见于大型、分散管理的企业集团,如GE、中石化等。

方案二:由应用系统承担主数据管理功能
常见于产品线差异较小,管理较集中的企业,如Apple、Boeing、华为等。

方案三:混合模式
企业分散程度介于方案一与方案二之间,对于不同类型的主数据,或利用相关业务系统或引入独立的主数据管理平台,如:GSK、海尔等。数字化转型网www.szhzxw.cn

方案四:集中管控
产业形态相对单一,企业快速发展(多收购、合并),集团管控和数据整合要求高的企业。

数据清洗
主数据清洗规范数字化转型网www.szhzxw.cn
主数据清洗工作包含期初数据的收集整理和遗留系统历史数据的处理, 需要提前制定主数据清洗方案, 以指导主数据的清洗工作。
主数据清洗方案主要涵盖以下内容:
主数据清洗的原则;
主数据清洗范围和目标;
主数据清洗的计划;
主数据清洗的组织和角色分工;数字化转型网www.szhzxw.cn
主数据清洗的流程、 要求和注意事项;
主数据清洗的模板, 定义每个主数据数据元素的质量规则和填报规范;
遗留系统历史数据处理策略。
主数据清洗操作
主数据清洗操作包括主数据归类、 主数据去重、 缺失值处理、 规范性描述等。
主数据归类:根据定义好的主数据分类体系将清洗范围内的数据逐一归类到相应的分类中。
主数据去重:利用工具+人工识别的方式, 找到重复或疑似重复的数据, 并进行剔除或合并。执行这一过程时, 强烈建议先去除关键属性中的空格,因为多了空格就会导致工具误判, 比如认为“张 三”与“张三”不是一个人。数字化转型网www.szhzxw.cn
缺失值处理:由于主数据的唯一性属性是不允许为空的, 因此需要通过工具找到有唯一性属性为空的数据并进行填补。对于其他附加的且可以为空的属性不作特殊要求。
规范性描述:主数据的属性填写得不规范是造成主数据质量低下的主要原因, 不规范问题包括字母大小写、 全半角、 特殊字符书写、 空格等问题。例如:表示直径的符号Φ不可以写成φ、 ∮ 、 Ψ或ф。
数据分发
主数据分发即将标准化的主数据分发给下游业务系统使用的过程。主数据分发过程的各系统厂商都应按照《主数据集成规范》 约定的集成方式、 接口标准、 注意事项进行对接。
在企业实施主数据分发的过程中, 需要根据不同场景选择不同的集成方式。
- 定期数据共享:一般采用ETL或接口方式定期将主数据抽取到业务系统指定的数据表中。
- 实时数据共享:一般采用消息订阅的方式, 通过数据接口将主数据推送给业务系统。
主数据分发对消费系统的要求如下。数字化转型网www.szhzxw.cn
- 对于新建系统, 要求新建的系统不能创建主数据, 必须接入主数据系统, 使用与主数据系统同步的标准数据。
- **对于历史遗留系统, 要求能改造的必须完成改造, 以满足主数据统一管理的要求;对于不能改造的系统, 必须手动建立与标准主数据的映射关系, 以保证数据集成与分析过程中主数据的唯一性和一致性。**
4、抓运营
对主数据的日常管理、质量管理等进行管理。

以下是PPT内容不分展示:




声明:本文来自网络,版权归作者所有。文章内容仅代表作者独立观点,不代表数字化转型网立场,转载目的在于传递更多信息。如有侵权,请联系我们。数字化转型网www.szhzxw.cn
数字化转型网数据专题包含哪些内容
数字化转型网数据专题将关注数据治理、数据质量管理、数据架构、主数据管理、数据仓库、元数据管理、数据备份、数据挖掘、数据分析、数据安全、大数据、数据合规、等数据相关全产业链相关环节。
数字化转型网数据专题包含: 数字化转型网(www.szhzxw.cn)
1、数据相关外脑支持:100+数据相关专家、100+数据实践者、1000+相关资料
2、数据研习社:与全球数据相关专家、实践者共同探讨相关问题,推动产业发展!
3、国际认证培训:目前已引进DAMA国际认证CDMP,其他国内外认证也在逐步引进中
4、典型案例参考:与数字化转型网数据要素X研习社社员一起学习典型案例,共探企业数据落地应用

本文由数字化转型网(www.szhzxw.cn)转载而成,来源于数字神化;编辑/翻译:数字化转型网Jack。






