主数据管理的前世 今生 未来(一文深入了解主数据管理)(上)

本文涉及的产品
数据管理 DMS,安全协同 3个实例 3个月
推荐场景:
学生管理系统数据库
简介: 根据Gartner的定义,“主数据管理(MDM)是一种技术支持的规程,业务和IT部门共同工作,以确保企业共享主数据资产的唯一性、准确性、语义一致性和可靠性……”

根据Gartner的定义,“主数据管理(MDM)是一种技术支持的规程,业务和IT部门共同工作,以确保企业共享主数据资产的唯一性、准确性、语义一致性和可靠性……”通过本文你将了解关于MDM的以下内容。所以,请继续阅读!

1. 数据管理的开始

2. 企业主数据管理的出现

3. 什么是主数据管理(MDM)

4. 什么时候需要以及为什么需要

5. 什么是多域主数据

6. 谁需要主数据管理

7. 什么是主数据治理

8. 主数据管理的主要好处

9. 什么是产品主数据管理

10. 什么是开源主数据管理

11. 如何找到正确的主数据管理策略

12. 如何选择主数据实现的模式

13. 主数据管理的未来方向是什么

1. 数据管理的开始

数据管理的早期推动者之一是企业资源规划(ERP)软件,其开端可以追溯到20世纪60年代。在20世纪90年代后期,Gartner首创了“ERP”这个词。为了提高企业管理的效率,ERP由一套集成的应用程序组成,以收集、储存、管理和分析来自众多业务活动的数据。它促进了后台和前台功能的自动化需求整合,并支持供应链管理(SCM)、客户关系管理(CRM)、商业智能(BI)和各种电子商务技术等协作应用。

随着工业系统的发展,信息技术不断发展,信息和数据的价值变得至关重要。随着数据继续呈指数级增长,处理大量信息的IT领导意识到ERP是不够的。由于销售、营销和客户服务技术的巨大进步,CRM数据处理突然被归入IT部门的范围。他们发展成为一个重要的力量,并提供客户“主”记录。看一下Gartner的图表,了解制造行业中的组织处理哪些类型的主数据,以及在产品和流程生命周期中使用哪些软件。

6eddbd6ebb568c2bc70c4deb00105164.png

2. 主数据的出现和企业需要

企业主数据管理着眼于通过将数据质量问题扼杀在萌芽状态来解决由于使用不同的应用程序、技术和系统而在整个IT环境中的复杂性。企业资源规划(ERP)、客户关系管理(CRM)、订单管理系统(OMS)甚至供应链管理(SCM)等有自己的主数据集的系统可能会危及运营,危及分析,让企业付出高昂代价,让利润率陷入混乱。企业MDM是解决企业数据质量和一致性问题的方案,因为它创建了一个数据的“黄金记录”,从许多数据入口点收集数据,它是通过结合业务的运营方面、数据仓库和业务分析来实现的。3d1fc0b7e216891a695ed5d56678975e.png

3.什么是主数据管理

根据Gartner的定义,“主数据管理(MDM)是一种技术支持的规程,业务部门和IT部门共同工作,以确保企业共享主数据资产的唯一性性、准确性、语义一致性和可靠性。主数据是一致和统一的标识符和扩展属性集合,描述企业的核心实体,包括客户、员工、供应商、站点、层次结构和会计科目等。”

主数据管理(MDM)是可靠数据管理实践的集合,包括应用程序、技术以及关键涉众、合作伙伴和业务客户。它包括整合、清理和增强公司主数据,并将其与业务流程、分析工具同步,以跨企业基础设施实现策略、服务和过程,以及时、一致和完整的方式简化数据捕获和集成。MDM系统的最终目标是提高运营效率,增强数据报告,帮助企业做出更明智的决策。

什么是主数据管理程序?

主数据管理(MDM)程序从多个系统获取数据,并通过将所有数据合并到一个“黄金”记录中来提供单一视图。例如,在客户数据的情况下,客户的记录可能在不同的点(如订单输入、客户服务或配送)上不相同。这是由于名字、住所和其他特征的不一致。MDM将所有客户数据标准化为一组唯一的主数据资产,可以在所有连接的系统中使用。这不仅可以帮助组织删除重复的数据,还可以消除冗余和不一致性,因此对于每个人,无论是操作人员、数据分析师,还是决策执行人员,对于每个人客户都只有一个画面。MDM程序可以应用于客户、产品或任何其他类型的需要共享的数据。

什么是主数据管理系统?

主数据管理系统为企业提供权威、可靠的数据,符合企业的需求和目标。它主要受三个因素的影响:a)所有主数据的域;b)企业系统当前的运行方式;c)部署所需的实现模式。

作为一般实践,MDM系统部署不会对所有数据域同时以成熟的、全速的方式进行。相反,它是分阶段进行的,最初,范围仅限于确保在最短的时间内不受任何阻碍的关键业务域。然后将实现扩展到其他系统,并扩展实现的范围。同样地,在企业中包含了更多的业务域,并且使用方法可能会沿着创建业务价值的方向持续发展。MDM系统可以在多业务域、多地域环境中执行。

4. 什么时候需要MDM 以及为什么需要它

当不同的部门通过价值链对数据进行更改时,创建自己的数据版本,将其存储在竖井中,并将修改后的数据重新引入系统,导致重复、冗余,最终阻碍企业生产力和整体产出。需要MDM的最明确的标志是:

•不清楚的数据描述——如果企业数据分布在不同的位置、系统、应用程序和其他数据源上,那么它永远无法给出数据的完整描述,从而导致不必要的复杂性。

•发现数据转换很麻烦——如果部门(供应商、产品团队、销售和市场)之间没有数据域间的关联,那么要知道哪些数据是正确的数据就会变得很困难。

•客户满意度下降——客户的不满可能是不一致的,不完整的,低质量的数据的结果,这可能会导致失去客户,糟糕的评论,并会严重损害品牌形象。

•增加非结构化数据——非结构化数据没有已定义的模式或数据模型。它可以是文本的或非文本的,但可能会引起关注,因为它可能导致巨大的歧义。

•痛苦的商业智能——不正确或不完整的数据无法准确的来源分析;它永远不能给你正确的洞察市场趋势,客户的想法或告诉你如何为你的利益使用数据。

现在需要主数据管理的主要原因是数据量的急剧增加。IDC预测,到2025年,将产生175 zb的新数据。在这样的比例下,数据管理人员只能想象与数据相关的复杂性将如何加剧。每个企业都渴望:

驱动创新

改善供应商和合作伙伴关系

减少投放市场的时间

加强合规和风险管理

降低成本、提高利润率

改善决策

增加收入增长

增强客户关系/服务

开发内部/操作效率

提高业务流程的敏捷性和结果

5. 什么是多域MDM

随着企业对数字资产、渠道/合作伙伴和客户/供应商数据、地理空间和层次数据等其他数据领域的兴趣激增,对多领域MDM的需求应运而生。因此,多领域、多矢量MDM开始被视为实现数字业务的工具,从在单个领域收集数据到连接不同领域的数据。

多域MDM解决方案帮助企业探索数据关联、建立连接、定义实体和生成新的增长可能性。

4301c0dd4ad5d3ab0357f873a6a3d1b8.png

Gartner发布的MDM Magic Quadrant证实了多领域MDM的发展趋势,58%的参考客户倾向于多领域MDM。

6. 谁需要主数据管理

以前人们认为,主数据管理只是大型企业的迫切需求,这些企业充斥着分散在各地的数据或者参与了并购,它们需要广泛的数据集成。

尽管如此,随着数据的激增及其对业务重要方面的影响,即便是规模较小的公司也无法再承担导致客户体验支离破碎的不同数据管理。特别是根据预测,到2023年,MDM的市场规模可能增长到220亿美元。因此,MDM对于所有关键业务功能(如营销、客户关怀、产品管理、销售、供应链、金融、仓储等)都是必需的。

a)谁参与了MDM活动

在更广泛的层次上,主数据管理活动由负责数据治理、数据管理和IT管理员承担。

数据治理委员会:制定数据定义、访问权限、标准、质量规则,并执行这些规则,以便在整个组织内实现适当的数据控制。

数据管理员:负责执行数据治理委员会的政策和指导方针。他们是使用MDM解决方案清理、修复和管理数据的人。它们来自组织中的支持功能,而不一定来自IT。

IT管理员:提供解决方案设计建议,强调系统可能的局限性,并在管理、设置和配置解决方案方面提供帮助。

b)谁是MDM的利益相关者

在MDM实现开始之前,必须找出主要涉众。涉众团队的规模和结构总是会根据数据的规模或业务范围而变化。然而,一般的层次结构可以是:

MDM委员会:这些是企业中最顶层的人员,即C-suITe/高级管理人员,他们创建计划,查看计划是否适合IT,查看未来需求的实现情况,并执行计划。所有权掌握在他们手中。

MDM指导团队:它由数据管理员和来自不同业务部门的专家组成,这些专家代表各个部门,负责根据业务需求定义流程、设置期望和监视程序执行。

解决方案架构师:是负责开发整个解决方案的人,通过遵循最佳实践,为各种接口和设计使用最佳技术。

项目经理:负责MDM程序的交付,管理整个团队,包括(但不限于)相关技术的领导;MDM顾问负责独立的主数据实体,如产品、客户或供应商;开发团队;治理团队

c)哪些行业正在充分利用主数据

零售业

随着零售行业转向客户驱动、个性化、权威数据统一视图,他们需要更快的数据采集、持续的敏捷性、精简的流程、自动化、灵活性和运营效率。MDM提供了预先配置的以零售为中心的元素、仪表板、业务规则、数据模型和用户界面,这些都是持续创新、速度、参与、数字化转换所需的,以驱动ROI和快速实现价值。

CPG

随着制造业和供应链变得越来越数据密集,部分是由于消费者购买行为的演变,部分是由于接触点的增加,CPG企业需要更好的洞察力和对整个生态系统的单一看法。MDM通过对业务生态系统(包括分销商、批发商和其他网络合作伙伴)的全面了解,帮助他们获得清晰的信息。它改善了整个价值链的报告,赋予CPG品牌他们所寻求的竞争优势。

制造业

改善合规性、数据自动化、工作流对于制造商整合来自不同系统的信息以跟上供应商、分销商和最终用户至关重要。MDM解决方案标准化数据,使产品更快地进入市场,改进了数据治理,与接收方实现双向信息共享。MDM允许产品数据联合,以满足需要不同结构和格式的数据的多个通道的需求。

分销业

负责管理数百万SKU(库存单位)的分销商需要实时了解业务关键数据、产品流的完整视图、门店库存、改进的合规性,并计算准确的ROI。MDM解决方案通过整合多领域数据、先进的库存管理、精简的信息流以及增强的工作流和通信,可以通过准时交付和正确的信息,建立更好的经销商与零售商、批发商之间的联系

7.什么是主数据治理

主数据治理是一组决策和策略,包括数据生命周期过程的责任和权利,按照预先批准的正式模型执行,以处理数据所有权、隐私、遵从性、访问、安全性、敏感性和风险,使组织能够尽可能地利用数据。

一个好的主数据治理策略必须包括:

•识别需要管理的共享资源。

•分配共享资源的责任。

•关于治理结构如何布局以及流程将如何遵循的沟通。

•分配与共享资源访问有关的决策权。

•将角色和职责划分到实现的不同领域,包括任何共享资源的策略和流程。

819d85873e5ea50c6c2cd1c933976638.png

数据治理层次结构

daa54d2ea00315129fa66acec70e6533.png

高管层:从高层开始,是指精通制定政策和战略的高层管理人员;他们大多是高层管理人员,负责监督上层对数据的管理。

战略层:这包括制定政策并提供预先设想的数据路径的人员。它们也有责任从战略角度解决升级的问题。

战术层:这些人负责执行数据故障排除。他们监视和报告管理活动和度量。它们还处理跨功能域、业务线和地理位置的数据质量和完整性。

操作层:此级别包括负责遵守数据标准、有效生产数据以解决数据关联问题、管理操作数据治理指标以及执行数据标准的人员。这些人包括数据管理员、数据联络员、应用程序数据架构师和应用程序所有者等。

作为MDM治理工作的开始,程序管理人员应该理解企业中现有主数据生命周期和期望主数据生命周期之间的差距。确定业务需求、关键涉众、角色和主数据的实际所有者。

8. 主数据管理的主要好处

主数据管理实现的最基本的好处之一是,让业务部门一次创建数据,并允许在任何地方使用它,就像一次更新数据并在任何地方更新数据一样。企业可以通过一个结构上和语义上一致的主数据视图(包括客户、产品、供应商等)来查看所有操作和事务。

MDM使企业能够完成以下各种任务:

•全面的采购流程

•加强遵守私隐法例

•帮助提升销售和交叉销售

•获得准确的分析和商业智能

•改进操作风险管理

•降低总成本

•获得高质量的数据

•提高员工生产力

•优化销售和营销

•提高客户满意度

•更智能的产品管理。

•加强预防欺诈

•减少供应商的新员工培训成本。

•简化供应链管理

•在合并和收购中节省成本

在宏观层面上,可以通过MDM融合高质量数据和智能业务流程来释放大量好处:

更低的总拥有成本(TCO)和更快的上市时间

有了MDM,采用和实现以及现有的维护和管理成本就会显著降低。几乎不需要编写任何代码。业务规则、安全性、数据管理功能、数据模型都是可定制的。无论哪种MDM模式,相同的软件实例都支持它。实现可以在本地实现,也可以在云上实现,或者两者兼而有之。MDM集中、标准化、丰富、验证和链接主数据记录的能力非常出色。它对多个地区、渠道和语言的适应性,没有数据复制,以及自动工作流,以一致和快速地跨任何渠道交付数据,并迅速发布产品,使更快地进入市场成为可能。

提高全企业效率,提高投资回报率

MDM帮助企业以极大的加速和敏捷性运行。它通过集成断开连接的流程来提高性能、更好地管理工作流、促进协作并降低风险,从而增强应用程序、系统和人员之间的关联。它将重复的、不一致的、矛盾的数据转换成单一的、权威的真相形式,一个黄金数据存储库。有效的主数据管理直接关系到您的ROI,因为所有面向数据的活动都依赖于数据的质量和强大的协作。组织可以通过简化流程来支持供应商和员工,节省时间和资源;营销和销售团队可以以最好的方式锚定客户,并根据他们的期望不断调整,从而实现ROI最大化。

提高决策和良好的客户体验

MDM支持更好的报告、遵从性和监控,以推动对风险和机会的最佳评估。通过对整个生态系统的360度数据视图,员工和决策者可以迅速分析流程中的任何故障或有效性,帮助他们得出正确的推论,以优化生产力、市场绩效、供应商协作和客户服务。一方面,MDM帮助为客户提供优质的、个性化的、连接的、一致的和最新的产品体验,从而促进用户参与。另一方面,通过分析、行为信息和预测分析增强对客户偏好的可见性,不仅可以为他们提供量身定制的客户体验,而且对客户保留和忠诚度非常有效。

9. 什么是产品主数据管理

产品主数据管理关注企业如何通过将产品数据合并到单个版本的真相或黄金记录中来管理产品的主数据,以便在整个企业中共享。产品MDM确保在整个价值链中维护数据的准确性、透明性和一致性。它简化了产品数据的复杂性,并通过在正确的地方将正确的产品数据呈现在正确的受众面前,为企业创造了竞争优势。

以下是产品主数据管理的一些最明显的优点:

•产品主数据管理通过对产品主数据进行语义协调,从而帮助企业在多个地理位置的异构数据源之间链接和同步产品数据(或信息)。它为各种业务计划的涉众提供了一个单一的产品视图。

•产品主数据管理改进了多渠道的信息交付,增加了供应链的可见性,减少了上市时间,加快了新产品/服务的引入,改进了定制分析,增加了企业协作,促进了创新,并为灵活的业务流程编排提供了敏捷性。本质上,产品主数据管理为组织做了以下工作:

•修正竖井,重复,错误,可疑的产品数据。

•在整个企业中共享最新、最新的产品数据。

•管理具有复杂属性和层次结构的产品。

•将相关的、值得信赖的产品信息整合到多个面向客户的销售渠道中。

•了解数据的可视性、差异、关系模式,并进行必要的修正。

•在提供自动化工作流程的同时,轻松获取供应商数据。

•通过适当的审计跟踪和记录账户,维护治理和法规遵从性。

•提供管理、丰富和建模主记录的所有方面的能力。

相关实践学习
MySQL基础-学生管理系统数据库设计
本场景介绍如何使用DMS工具连接RDS,并使用DMS图形化工具创建数据库表。
相关文章
|
存储 数据采集 机器学习/深度学习
主数据管理的前世 今生 未来(一文深入了解主数据管理)(下)
根据Gartner的定义,“主数据管理(MDM)是一种技术支持的规程,业务和IT部门共同工作,以确保企业共享主数据资产的唯一性、准确性、语义一致性和可靠性……”
主数据管理的前世 今生 未来(一文深入了解主数据管理)(下)
|
数据采集 XML 运维
什么是主数据管理?企业主数据管理方法论
主数据又被称为黄金数据,其价值高也非常重要。对企业来说,主数据的重要性如何强调都不为过,主数据治理是企业数据治理中最为重要的一环。主数据管理的内容包括 主数据管理标准、主数据应用标准 和 主数据集成服务标准 三大类。
|
数据采集 供应链 Oracle
「数据架构」:主数据管理 (MDM)概览和为什么选择主数据管理
「数据架构」:主数据管理 (MDM)概览和为什么选择主数据管理
|
3月前
|
物联网 数据管理 Apache
拥抱IoT浪潮,Apache IoTDB如何成为你的智能数据守护者?解锁物联网新纪元的数据管理秘籍!
【8月更文挑战第22天】随着物联网技术的发展,数据量激增对数据库提出新挑战。Apache IoTDB凭借其面向时间序列数据的设计,在IoT领域脱颖而出。相较于传统数据库,IoTDB采用树形数据模型高效管理实时数据,具备轻量级结构与高并发能力,并集成Hadoop/Spark支持复杂分析。在智能城市等场景下,IoTDB能处理如交通流量等数据,为决策提供支持。IoTDB还提供InfluxDB协议适配器简化迁移过程,并支持细致的权限管理确保数据安全。综上所述,IoTDB在IoT数据管理中展现出巨大潜力与竞争力。
106 1
|
4月前
|
SQL NoSQL 数据管理
数据管理DMS使用问题之如何批量导入MongoDB的数据文件
阿里云数据管理DMS提供了全面的数据管理、数据库运维、数据安全、数据迁移与同步等功能,助力企业高效、安全地进行数据库管理和运维工作。以下是DMS产品使用合集的详细介绍。
|
16天前
|
关系型数据库 分布式数据库 数据库
云栖大会|从数据到决策:AI时代数据库如何实现高效数据管理?
在2024云栖大会「海量数据的高效存储与管理」专场,阿里云瑶池讲师团携手AMD、FunPlus、太美医疗科技、中石化、平安科技以及小赢科技、迅雷集团的资深技术专家深入分享了阿里云在OLTP方向的最新技术进展和行业最佳实践。
|
1月前
|
存储 人工智能 安全
【荣誉奖项】荣获2024数据治理优秀产品!瓴羊Dataphin联合DAMA发布数据管理技能认证
瓴羊Dataphin连续俩年获得DAMA年度优秀数据治理产品奖,本次与DAMA联合发布“DAMA x 瓴羊 数据管理技能认证”,助力提升全民数据素养。
137 0
【荣誉奖项】荣获2024数据治理优秀产品!瓴羊Dataphin联合DAMA发布数据管理技能认证
|
1月前
|
数据采集 安全 数据管理
通信行业数据治理:如何实现高效、安全的数据管理?
在未来的发展中,通信行业的企业应加强数据治理意识,提高数据治理能力;同时,积极开展跨行业的合作创新,共同推动行业的繁荣与发展。相信在不久的将来,通信行业将迎来更加美好的明天。
|
3月前
|
JSON 数据管理 关系型数据库
【Dataphin V3.9】颠覆你的数据管理体验!API数据源接入与集成优化,如何让企业轻松驾驭海量异构数据,实现数据价值最大化?全面解析、实战案例、专业指导,带你解锁数据整合新技能!
【8月更文挑战第15天】随着大数据技术的发展,企业对数据处理的需求不断增长。Dataphin V3.9 版本提供更灵活的数据源接入和高效 API 集成能力,支持 MySQL、Oracle、Hive 等多种数据源,增强 RESTful 和 SOAP API 支持,简化外部数据服务集成。例如,可轻松从 RESTful API 获取销售数据并存储分析。此外,Dataphin V3.9 还提供数据同步工具和丰富的数据治理功能,确保数据质量和一致性,助力企业最大化数据价值。
170 1
|
3月前
|
Java 测试技术 容器
从零到英雄:Struts 2 最佳实践——你的Web应用开发超级变身指南!
【8月更文挑战第31天】《Struts 2 最佳实践:从设计到部署的全流程指南》深入介绍如何利用 Struts 2 框架从项目设计到部署的全流程。从初始化配置到采用 MVC 设计模式,再到性能优化与测试,本书详细讲解了如何构建高效、稳定的 Web 应用。通过最佳实践和代码示例,帮助读者掌握 Struts 2 的核心功能,并确保应用的安全性和可维护性。无论是在项目初期还是后期运维,本书都是不可或缺的参考指南。
50 0