数字化转型网数据专题将关注数据治理、数据质量管理、数据架构、主数据管理、数据仓库、元数据管理、数据备份、数据挖掘、数据分析、数据安全、大数据、数据合规、等数据相关全产业链相关环节。

一、数据治理
已经实现的数据治理结构来指导主数据框架的开发和操作。数据治理包括指导委员会和工作组。
指导委员会明确了主数据的所有权和责任,建立了提供和提高主数据质量的责任层次结构。指导委员会还提供总体愿景、战略和指导。
工作组:
•定义和沟通的原则、流程和控制;数字化转型网www.szhzxw.cn
•审查制定的可交付成果,以实现与企业数据战略相一致的主数据方法;
•调查和推荐主数据相关的解决方案,以解决业务难点,并确保与企业数据战略保持一致;
•调查并建议主要主数据问题的解决方案;
•协调业务参与或指导主数据项目;
•将关键议题升级到委员会进行批准;
•报告主数据指标。数字化转型网www.szhzxw.cn
二、数据标准
指导委员会确认将要掌握的数据实体。
工作组确保以业务术语定义实体,包括所有字段/属性以及可接受的业务规则和这些属性的值。这些项目随后包括在组织逻辑数据模型中。
工作组确定可用于衡量数据质量的指标。这既包括记录系统内的数据,也包括整个记录系统和所有保留主数据副本的系统。
报告的实施是为了向指定的所有者提供关于主数据实体的数据质量的定期视图。
三、流程
对于所有已掌握的数据,应在一致的、标准化的模型中开发流程。流程与业务流程保持一致,但增强了对数据重要性的认识,以及对系统或记录中的数据的掌握。这些过程应形成文档,包括过程模型、描述和流程图。数字化转型网www.szhzxw.cn
这些过程包括:
•数据集成:记录系统的实现,以及与每个需要与主数据交互的系统的接口
•数据维护:主数据的创建、查询、更新、删除、合并和解除合并,包括对保留该数据副本的所有系统的影响。
•数据质量保证和控制:需要识别、行动和报告数据质量问题的过程。这些流程应该利用作为数据标准一部分的度量标准。这些度量标准应有助于确定数据维护过程未能达到预期数据质量标准的领域,以便对这些过程进行审查和加强。
•归档:需要从主数据集中删除记录的过程。这可能需要将记录存档以供将来参考。归档不仅应该发生在记录系统中,而且应该在与主数据交互的所有系统之间进行协调(例如,如果一个员工记录被归档,那么与该员工的交互记录也应该被删除/归档)。数字化转型网www.szhzxw.cn
四、组织
要定义清晰的操作角色、任务和职责,并与上述确定的流程保持一致。资源分配水平是掌握关键数据的过程的一部分。
五、技术
实现MDM有4种常见的技术方法:
•注册表式
中央存储库由识别主数据集中的重复记录所需的最小数据组成。对主数据的更改继续在现有的源系统中进行,而不需要从寄存库集成到源系统。跨源系统的更新要么通过手工处理,要么通过其他接口技术处理。
•整合式
整合的方法是在一个中央存储库中合并来自多个来源的数据。对数据进行匹配和分析以保证质量,从而创造了“黄金纪录”。这种方法通常用于报告和分析。
•共存式
类似于整合方法,共存方法使用数据提要创建一个“黄金记录”,然后集中存储。从源系统检测到的任何更改都可以跨所有源系统反馈。数字化转型网www.szhzxw.cn
•集中式
主数据存储在中央数据存储库中。所有的创建和更新都是通过中央数据存储进行的,更新将反馈给需要访问该数据的系统。
要支持上述任何一种方法,必须在主数据系统中的逻辑数据模型的物理表示与数据源中的物理表示之间提供映射。
六、记录系统
6.1系统功能要求
6.1.1记录系统必须提供通用注册功能
通用注册功能是指系统或应用程序套件能够注册、维护和分发特定业务实体所需的共享信息的能力。
“从源头捕捉一次信息,其他系统共享使用”的原则已广为流传和接受。在现实中,由于缺乏基本的系统功能来支持注册过程和开放的信息共享,这种理想很难实现。数字化转型网www.szhzxw.cn
6.1.2支持管里过程的系统应是切合实际的
一般而言,支持数据注册程序的系统应提供下列数据服务:
•说明一个给定的唯一标识符是否存在于注册集中。例如,回答“88888888编号的员工已经存在吗?”
•给定一个唯一标识符的值,根据请求提供其相关属性。例如,回答问题“编号为88888888的员工姓名和出生日期是什么”?
•规定可以用作自然键的属性的基本集,即最小字段集可以被接受为注册一个新实体所需的最小信息。
•给定一个基本属性集的值,验证一个记录当前是否存在于现实世界的东西。例如,回答以下问题:“您是否已经有一个约翰·史密斯(1977年10月17日)注册为员工?”
•给定任何一组属性的值,返回匹配该属性值的所有记录。例如,回答这个问题“告诉我你注册的所有的约翰·史密斯?”
•给定包含一个新的自然键的信息,创建一个新的记录,并为该记录发布一个新的唯一标识符。例如,“我知道我有一个新员工叫John Smith(1977年10月17日)。请签发一个新的员工编号。”
•为相同的真实世界实体启用补救重复记录(合并)。数字化转型网www.szhzxw.cn
•使修复发现的单个记录来表示两个现实世界的实体(分割)。
6.1.3记录体系应具有完整和独立的覆盖范围
支持数据注册过程的系统:
•提供指定实体的完整注册覆盖范围(该实体的所有可能实例应能够在系统中注册)。因此,例如,如果系统在注册员工,那么在注册过程中容纳所有类型的员工是很重要的。这可能意味着海外员工,也可能是国内员工。另一个例子可能是慈善机构和政府机构,以及企业和行业合作伙伴。
•提供指定实体的唯一注册覆盖范围。也就是说,企业中不应该有其他系统也注册这种真实世界的东西。
在合并和采集的过程中,这个理想可能很难实现,但是如果没有它,注册机构应该提供存储、持有和发布遗留标识符和全局标识符之间的映射或转换的能力。数字化转型网www.szhzxw.cn
6.1.4记录系统应具有适当的业务流程
注册系统应当具备以下业务流程:
•能够非常准确地区分现实世界中的新事物和现有事物
•提供事后协调,以纠正两个真实世界的事物被错误地用一个数据记录发布的情况
•提供事后协调,以纠正为同一个现实世界的东西创建两个数据记录的情况
6.1.5应不断改进控制过程
这一领域的最佳实践一贯认为,需要不断重新评估注册过程和数据质量分析。支持注册的业务管理流程应该对引起底层主数据更改的业务事件敏感。业务流程应该努力利用每一个机会来捕获更新的信息。
6.2唯一标识要求
6.2.1唯一标识符的值必须在发布它的记录的整个生命周期内保持不变
为了实现唯一性,唯一标识符本质上是数据世界中真实世界实体的代表,我们努力实现真实世界和数据记录之间的一对一关系。唯一标识符的生命周期应该与真实世界实体的生命周期一致。如果唯一标识符的值发生了变化,就意味着对应的现实世界的东西也变成了某人/某物,这并不理想。
6.2.2唯一标识符的值在其集合内必须是唯一的
要实现唯一性,唯一标识符必须对每个不同的记录是唯一的。否则就会引起歧义,标识符就不能准确地识别引用的是哪个记录。
6.2.3唯一标识符的值一旦发布给一条记录,就不能再发布给另一条记录
在异构技术环境中重新发布唯一标识符会导致排序问题,以及对所要识别的底层实体的混淆。
6.2.4为唯一标识符选择的格式必须提供足够的可用值,以便在可预见的将来支持实体的所有可想到的实例
唯一标识符的格式通常表示可以发出的唯一值的数量限制。例如,如果选择4位数字值来表示客户唯一标识符,那么可以将客户数量限制为10,000。选择不当的格式对业务操作造成了人为的限制,并且削弱了惟一标识符惟一地、明确地标识实例的能力。对任何组织来说,重新颁发唯一标识符都是一个极其痛苦的过程,应该尽可能少地进行。
关于“可预见未来的需求”的决策应该是基于有关组织战略远景的最佳可用信息的架构决策。
6.2.5唯一标识符不应有任何附加含义
惟一标识符的作用是在记录的生命周期内惟一地标识一条记录。一个糟糕的例子是对唯一标识符的第一个数字进行编码,比如‘2’表示‘NSW’,‘3’表示‘Victoria’等等。数字化转型网www.szhzxw.cn
当一个唯一标识符被赋予额外的含义时,它作为唯一标识符的工作就变得不那么容易了。人们开始对唯一标识符的含义做出假设,这可能会对实体本身的含义造成混淆。如果底层属性改变(例如,如果一个人从NSW移动到Victoria),那么要么唯一标识符的值需要改变,要么唯一标识符不再准确地表示属性。
唯一标识符不应该是一个名称,因为它们在语言上不是中性的,因此传达的意思可能会随着时间的推移而改变。
声明:本文来自网络,版权归作者所有。文章内容仅代表作者独立观点,不代表数字化转型网立场,转载目的在于传递更多信息。如有侵权,请联系我们。数字化转型网www.szhzxw.cn
数字化转型网数据专题包含哪些内容
数字化转型网数据专题将关注数据治理、数据质量管理、数据架构、主数据管理、数据仓库、元数据管理、数据备份、数据挖掘、数据分析、数据安全、大数据、数据合规、等数据相关全产业链相关环节。
数字化转型网数据专题包含: 数字化转型网(www.szhzxw.cn)
1、数据相关外脑支持:100+数据相关专家、100+数据实践者、1000+相关资料
2、数据研习社:与全球数据相关专家、实践者共同探讨相关问题,推动产业发展!
3、国际认证培训:目前已引进DAMA国际认证CDMP,其他国内外认证也在逐步引进中
4、典型案例参考:与数字化转型网数据要素X研习社社员一起学习典型案例,共探企业数据落地应用

本文由数字化转型网(www.szhzxw.cn)转载而成,来源于数据驱动智能;编辑/翻译:数字化转型网Jack。






