「主数据架构」介绍下一代主数据管理(MDM)

本文涉及的产品
数据管理 DMS,安全协同 3个实例 3个月
推荐场景:
学生管理系统数据库
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介: 「主数据架构」介绍下一代主数据管理(MDM)

「主数据架构」介绍下一代主数据管理(MDM)

首席架构师 2019-11-29 17:31


主数据管理是旨在创建和维护权威、可靠、可持续、准确、及时和安全的环境的过程和技术框架。这个环境代表了一个单一版本的事实,作为跨不同的系统、业务单元和用户社区的可接受的记录系统。

尽管MDM不是新的,但是最近人们对开发MDM解决方案的兴趣大增。这是因为跨广泛行业的组织的战略和战术需求。这种趋势的一些关键驱动因素是诸如GPDR、Sarbanes-Oxley Act和HIPAA等法规的遵从性。

主数据管理还使组织能够更好地关注以客户为中心的活动,更好地洞察客户的目标、需求、能力和要求额外产品和服务的倾向。如果执行正确,这可以增加交叉销售和追加销售的收入机会,并改善整体客户体验。

MDM实现过程中遇到的一些关键技术挑战包括:

  1. 数据治理以及度量和解决数据质量问题的能力
  2. 创建和维护组织范围内一致的数据定义
  3. 可伸缩性方面的挑战,要求MDM解决方案处理大量和复杂的数据,特别是增加“大数据”的使用,包括移动和社交媒体等非结构化数据
  4. 实施过程控制以支持审计和合规报告的需要

MDM解决方案和供应商产品通过引入和集成新技术、提高数据质量和匹配解决方案,不断扩展各种特性集的功能。下面是一些特定的核心功能,它们随着时间的推移不断发展,以满足当今的业务需求并减少实现风险。

MDM业务价值从集成模型发展到分析模型

许多客户将他们的MDM计划与实时客户参与(360视图)和业务流程优化紧密联系在一起。这些用例依赖于大量的属性和元数据,这些属性和元数据为个性化、后勤和预防性维护提供上下文。在过去,一个hub最多只包含几百个数据元素。

今天,客户需要的解决方案能够支持一个域的数千个数据元素和一个多域中心的数万个数据元素。一些数据驱动的用例是:

  1. 基于上下文信息的重要性,如谷歌现在显示即将到来的旅行,报告目的地天气,预测分析和建议
  2. 内置的MDM功能,可以将实体关联到360个视图中,供打开的机票、订单和朋友的参考
  3. 行为、偏好、权限、安全性、身份、位置和时间都在图中维护和连接,并在业务上下文中表示给数据使用者。例如,行为模式可以定义客户域,而不是只关注身份。这将创建相关性、敏捷性和灵活性,以便将主数据塑造为任何业务服务。

下一代数据源的架构考虑:(大数据、社交)、云和其他关键技术趋势,如图形数据库

像Informatica、Reltio和Pitney Bowes这样的MDM工具使用一个图形数据库来收集主数据,并将它们与其他属性和元数据联系起来。相对容易地跨通道集成内部、外部、移动和非结构化源是图数据库采用的关键考虑因素。

此外,数据模型更加多维,数据层次更加深入。为了适应组织需求的复杂性和复杂性,客户参考更倾向于使用上下文和分析性MDM解决方案,而不是传统的MDM工具,后者将关系数据库作为体系结构的一部分。

通过图形数据库、机器学习、大数据和分析可视化支持MDM功能和分析功能的解决方案。这些解决方案将主数据直接转换为insight。数据模式的可视化显示了客户连接和偏好。机器学习仅仅通过理解数据链接就能提供真知灼见。一些示例场景包括产品建议、身份和欺诈分析、合并和收购协调。机器学习采用动态的、不断演化的数据,而关系数据库在互连数据方面比较慢。

需要特定的工具来提供构建高级匹配和合并流程算法的能力。社交分析尤其如此,它是大数据中应用最广泛的用例之一。社会分析的最大挑战是成功地识别组织现有客户的社会概况,这主要是因为在搜索常见名称时可以返回多个结果。此外,许多人在他们的社交资料中使用化名而不是真名,这使得识别这些资料更加困难。

一个主动的数据治理过程

为了进行适当的数据治理,您需要一个MDM工具,它可以简化和自动化管理过程,消除过去让管理人员不堪重负和数据使用瓶颈的手工过程。实现高级数据治理策略也很重要。这些规则不仅涉及数据使用、所有权等方面,还涉及特定于大数据的数据治理和数据管理。

数据治理中其他两个必要的因素包括确保外部数据不会影响内部数据的完整性,以及确保能够管理数据冲突的升级路径。出于安全原因,您还应该简化隐私策略的定义和管理。

Reltio、Informatica、SAP、IBM和Pitney Bowes领衔(Forrester)

这些领导者展示了丰富的MDM功能,可以用于复杂的主数据场景、大型复杂的生态系统和数据治理,从而交付企业级的业务价值。


外部引用数据提供者及其服务将在MDM实现中扮演重要角色。诸如Dun & Bradstreet、Acxiom、Lexus-Nexus等公司就是这样的数据提供商。它们是提供关键功能的关键,例如数据清理、合理化、充实和匹配。

业务需求和供应商整合最终将导致提供全面的MDM解决方案,其中包括复杂的数据质量组件、灵活的规则引擎、元数据存储库和基于组件化服务的产品套件中的遵从性和审计监控功能。

在Intersys,我们的一大批高技能的顾问在许多不同类型的MDM工具和用例方面都非常合格。凭借我们的专业知识,我们可以实现或支持您的所有Maser数据管理需求,并帮助您的组织实现数字化转型。

相关实践学习
MySQL基础-学生管理系统数据库设计
本场景介绍如何使用DMS工具连接RDS,并使用DMS图形化工具创建数据库表。
相关文章
|
4天前
|
存储 分布式计算 数据挖掘
数据架构 ODPS 是什么?
数据架构 ODPS 是什么?
45 7
|
4天前
|
数据采集 搜索推荐 数据管理
数据架构 CDP 是什么?
数据架构 CDP 是什么?
16 2
|
15天前
|
关系型数据库 分布式数据库 数据库
云栖大会|从数据到决策:AI时代数据库如何实现高效数据管理?
在2024云栖大会「海量数据的高效存储与管理」专场,阿里云瑶池讲师团携手AMD、FunPlus、太美医疗科技、中石化、平安科技以及小赢科技、迅雷集团的资深技术专家深入分享了阿里云在OLTP方向的最新技术进展和行业最佳实践。
|
29天前
|
存储 人工智能 安全
【荣誉奖项】荣获2024数据治理优秀产品!瓴羊Dataphin联合DAMA发布数据管理技能认证
瓴羊Dataphin连续俩年获得DAMA年度优秀数据治理产品奖,本次与DAMA联合发布“DAMA x 瓴羊 数据管理技能认证”,助力提升全民数据素养。
137 0
【荣誉奖项】荣获2024数据治理优秀产品!瓴羊Dataphin联合DAMA发布数据管理技能认证
|
1月前
|
存储 SQL 分布式计算
湖仓一体架构深度解析:构建企业级数据管理与分析的新基石
【10月更文挑战第7天】湖仓一体架构深度解析:构建企业级数据管理与分析的新基石
67 1
|
1月前
|
数据采集 安全 数据管理
通信行业数据治理:如何实现高效、安全的数据管理?
在未来的发展中,通信行业的企业应加强数据治理意识,提高数据治理能力;同时,积极开展跨行业的合作创新,共同推动行业的繁荣与发展。相信在不久的将来,通信行业将迎来更加美好的明天。
|
1月前
|
存储 大数据 数据处理
洞察未来:数据治理中的数据架构新思维
数据治理中的数据架构新思维对于应对未来挑战、提高数据处理效率、加强数据安全与隐私保护以及促进数据驱动的业务创新具有重要意义。企业需要紧跟时代步伐,不断探索和实践新型数据架构,以洞察未来发展趋势,为企业的长远发展奠定坚实基础。
|
2月前
|
存储 搜索推荐 数据库
MarkLogic在微服务架构中的应用:提供服务间通信和数据共享的机制
随着微服务架构的发展,服务间通信和数据共享成为关键挑战。本文介绍MarkLogic数据库在微服务架构中的应用,阐述其多模型支持、索引搜索、事务处理及高可用性等优势,以及如何利用MarkLogic实现数据共享、服务间通信、事件驱动架构和数据分析,提升系统的可伸缩性和可靠性。
43 5
|
3月前
|
安全 网络安全 数据安全/隐私保护
云原生技术探索:容器化与微服务架构的实践之路网络安全与信息安全:保护数据的关键策略
【8月更文挑战第28天】本文将深入探讨云原生技术的核心概念,包括容器化和微服务架构。我们将通过实际案例和代码示例,展示如何在云平台上实现高效的应用部署和管理。文章不仅提供理论知识,还包含实操指南,帮助开发者理解并应用这些前沿技术。 【8月更文挑战第28天】在数字化时代,网络安全和信息安全是保护个人和企业数据的前线防御。本文将探讨网络安全漏洞的成因、加密技术的应用以及提升安全意识的重要性。文章旨在通过分析网络安全的薄弱环节,介绍如何利用加密技术和提高用户警觉性来构建更为坚固的数据保护屏障。
|
2月前
|
缓存 负载均衡 数据管理
深入探索微服务架构的核心要素与实践策略在当今软件开发领域,微服务架构以其独特的优势和灵活性,已成为众多企业和开发者的首选。本文将深入探讨微服务架构的核心要素,包括服务拆分、通信机制、数据管理等,并结合实际案例分析其在不同场景下的应用策略,旨在为读者提供一套全面、深入的微服务架构实践指南。**
**微服务架构作为软件开发领域的热门话题,正引领着一场技术革新。本文从微服务架构的核心要素出发,详细阐述了服务拆分的原则与方法、通信机制的选择与优化、数据管理的策略与挑战等内容。同时,结合具体案例,分析了微服务架构在不同场景下的应用策略,为读者提供了实用的指导和建议。

热门文章

最新文章