【话题】企业的数据资产管理

简介: 关注公众号“达摩院首座”,了解开发者最真实生活

就像其他有形资产货币化一样,企业数据和服务在资产负债表上也具有财务价值。通过数据资产管理从企业数据和服务中提取商业价值 – 推动数据创新,促进数据经济中新数据产品和服务的推出–以及竞争绩效计划(CAP),可提供增强的运营绩效和加速的业务成果。

每天,在每个组织中,依靠从企业数据中获得的分析和见解所提供的大量决策和行动,正日益受到新的和不断发展的数据资产管理框架,数据架构和技术平台的推动。

在各行各业,公司都在争夺独特的数据资产并开发数据利用方法以期待超越同样在挖掘数据价值的竞争对手们。那些不将数据视为核心企业资产或无法制定数据资产管理策略的公司面临下降的危险,并最终冒着业务失败的风险。

1.jpg

现在,许多组织正在通过数据资产管理(DAM)改变其设计和管理业务和技术产品组合,规划,设计和执行其数据业务转型计划和项目的方式,从而提供了一种更成功,更有效的方式来持续改进核心运营和流程的日常执行和结果。理论上只要有足够的资金,计划和组织,数据资产管理就可能通过业务战略支持在每个公共和社会企业中产生重大的业务影响。

数据资产管理体系结构,方法和技术,数据服务和平台支持数据创新,以创建新颖的数据产品和服务,并可以推动竞争力成就计划(CAP)来提高业务绩效。

  • 数据资产管理的范畴主要包括以下八个方面:
  • 数据资产模型–企业和域级别的数据,服务和信息模型
  • 数据架构–业务和技术数据架构和路线图
  • 数据技术平台–社交,移动,分析和云平台
  • 数据资产管理框架–企业数据和服务框架
  • 快速数据设备– 包括内存/显存计算(GPGPUs)以及高速磁盘(SSD)等
  • 大数据平台– Hadoop集群,Spark(Cloudera,Hortonworks,MAPR)
  • 数据科学平台–倾向性和预测模型,分析和见解
  • 人工智能平台–人工智能(AI)/机器学习

        在DAM的另一个成熟度模型中我们可以看到通过观测、取样可以获取数据,通过比照从数据中获取信息,进而提炼知识并实现行业洞察。
    

2.jpg

数据资产即企业数据和服务既不是丰富的资源,也不是随时可用的资源。数据资产可能会分解为大量稀缺,独特,有价值且经常来之不易的数据点和应用程序。每个数据点均由其共享的元数据(格式)及其特定的内容(值)定义。

数据点出现的特征可以是结构化的事务性,基于事件的数据,包括时间(历史)和空间(地理),个人(人口),位置(地点),财政(货币),条件(状态)和事务性(事件)数据项值-或描述为非结构化的文本,图像,音频和视频流数据内容。

每个数据点都与自己特定的一组应用程序(数据服务),源,成本和收益相关联。正如企业无法在没有必要的种子资金或资本化的情况下参与新的数据市场和经济一样,同样,这些企业也无法在没有数据和算法支持的情况下产生新的倾向模型或定价计划。

3.jpg

从上图可以看出,数据资产管理的框架可以包含以下六个领域:

  • 数据管理战略(Data Management Strategy):包括沟通计划,数据管理职能分配,商业案例以及资金供给;
  • 数据治理(Data Governance):包括业务字典和元数据管理;
  • 数据质量(Data Quality):数据质量战略包括数据剖析,数据质量评估和数据清洗;
  • 数据运维(Data Operations):包括对数据要求的定义,数据生命周期管理以及数据源管理;
  • 平台及架构(Platform & Architecture):包括数据架构的演进规划,架构标准,数据管理平台建设,数据集成以及历史数据归档;
  • 流程支持(Supporting Processes):包括数据的评估和分析流程,管理流程,质保流程,风险管理以及配置管理。

DAM以及支持DAM的数据体系结构和技术平台,包含一组企业数据框架,这组框架由执行企业数据管理任务和决策的方法,技术和过程组成。

数据资产管理支持对速度,可变性和容量的关键企业数据要求,从而可以将传统的托管本地企业应用程序(ERP,CRM,DWH和BI)转换为一组强大,有弹性和可靠的SMAC(社交,移动,供应商可从市场上购买的分析工具,云)数据服务–易于购买,安装,实施,使用和利用。

这些新的SMAC数据资产通过Internet交付,并作为公共,私有或混合云服务托管。SMAC数据资产还必须与旧版企业解决方案集成才能有效。某些传统的企业数据中心可能会被重新发明-私有云通过新的和重新配置的SMAC数据资产提供现有的遗留功能。

SMAC数据集释放的增强的功能和容量不仅将极大地提高运营效率,而且还释放了进一步的战略竞争优势机会。竞争优势是通过部署数据科学/大数据/快速数据,为分析和洞察力提供动力,API服务访问云计算和其他第三方消费者平台来推动的:

SMAC数据技术栈包括但不限于以下内容:

  • 社交媒体|用户内容
  • 移动平台|智能终端|智能应用
  • 分析|数据科学|大数据平台(Hadoop,Spark等)|快速处理器(GPGPU, SSD等)
  • 云服务平台(AWS, Azure, Salesforce, 阿里云等等)
  • 车载信息系统(边缘端驱动)|自动数据流|物联网
  • 4D地理数据模型|地理人口统计|GIS地图和空间分析

随着数据和平台的多样化,DAM越来越需要集成混合云体系结构,并依赖开源软件和商业软件之间的协作,为数据服务的扩散提供新机制,包括数据呈现,流程执行,数据管理和集成,分析见解等。但是,所有这些都需要大量投资。由于数据资产管理方法发布了新的标准,许多企业开始着手投资研发新的DAM体系。

4.jpg

除了针对标准,DAM还应提供访问内部和外部数据市场的可能性,这些市场可以满足对新智能产品和扩展数据消费的现场需求。与内部和外部数据湖的视觉和图形界面使数据科学家和其他主要利益相关者能够以与在任何电子商务站点上购买商品的方式相同的方式浏览和访问新数据集。可视化地发现,分析,转换,组合和显示内部和外部数据的数据应用程序现在使探索新风险因素或商业机会的实际成本低于未能调查问题的机会成本。

许多国外公司收集可能与其他组织共享的数据,可能经过进一步处理后进行了处理-扩充和增强(与其他数据源结合或“混搭”)或匿名化(清除专有和个人标识信息)。其中的某些数据可能对其贸易伙伴或供应链中的其他相关方非常重要。其他数据可能对无关的外部组织(包括人口统计数据汇总商(Sky IQ,Experian,Dunnhumbey或CACI)或政府机构)具有商业价值。

5.jpg

一言以蔽之,数据资产将扩展算法分析和见解的影响力,从而从根本上改善人工决策的结果。随着管理人员将更多数据纳入其决策过程,更多的问题/机会都将暴露出其嵌入式的数据逻辑。那些曾经被严格认为是人类的选择将成为机器的重担。今天主要在实验中使用的数据算法(例如基因工程,知识图谱),明天将成为常规程序。

相关实践学习
如何快速连接云数据库RDS MySQL
本场景介绍如何通过阿里云数据管理服务DMS快速连接云数据库RDS MySQL,然后进行数据表的CRUD操作。
相关文章
|
30天前
|
人工智能 搜索推荐 架构师
智能体来了:IP操盘手的「知识驱动」运营升级指南
IP进入价值深耕时代,AI智能体正成为激活知识资产的核心工具。本文以阿里云百炼平台为例,解析如何通过“知识结构化-服务场景化”构建IP智能体,实现内容精准触达、个性化服务与持续迭代,助力IP从流量运营迈向长效增长。
|
存储 数据采集 数据管理
一体化元数据管理平台——OpenMetadata入门宝典
一体化元数据管理平台——OpenMetadata入门宝典
3358 0
|
2月前
|
人工智能 Java API
AI 超级智能体全栈项目阶段一:AI大模型概述、选型、项目初始化以及基于阿里云灵积模型 Qwen-Plus实现模型接入四种方式(SDK/HTTP/SpringAI/langchain4j)
本文介绍AI大模型的核心概念、分类及开发者学习路径,重点讲解如何选择与接入大模型。项目基于Spring Boot,使用阿里云灵积模型(Qwen-Plus),对比SDK、HTTP、Spring AI和LangChain4j四种接入方式,助力开发者高效构建AI应用。
1408 122
AI 超级智能体全栈项目阶段一:AI大模型概述、选型、项目初始化以及基于阿里云灵积模型 Qwen-Plus实现模型接入四种方式(SDK/HTTP/SpringAI/langchain4j)
|
6月前
|
人工智能 编解码 芯片
告别低效沟通|让技术提问不再头疼-这套高效AI提问模板来帮你
不会向ai提问,不知道怎么提问的 可以看看
20687 1
告别低效沟通|让技术提问不再头疼-这套高效AI提问模板来帮你
|
机器学习/深度学习 人工智能 开发框架
【AI系统】AI 学习方法与算法现状
在人工智能的历史长河中,我们见证了从规则驱动系统到现代机器学习模型的转变。AI的学习方法基于深度神经网络,通过前向传播、反向传播和梯度更新不断优化权重,实现从训练到推理的过程。当前,AI算法如CNN、RNN、GNN和GAN等在各自领域取得突破,推动技术进步的同时也带来了更大的挑战,要求算法工程师与系统设计师紧密合作,共同拓展AI技术的边界。
583 1
|
11月前
|
算法
基于GA遗传算法的PID控制器参数优化matlab建模与仿真
本项目基于遗传算法(GA)优化PID控制器参数,通过空间状态方程构建控制对象,自定义GA的选择、交叉、变异过程,以提高PID控制性能。与使用通用GA工具箱相比,此方法更灵活、针对性强。MATLAB2022A环境下测试,展示了GA优化前后PID控制效果的显著差异。核心代码实现了遗传算法的迭代优化过程,最终通过适应度函数评估并选择了最优PID参数,显著提升了系统响应速度和稳定性。
758 15
|
人工智能 自动驾驶 算法
AIoT(人工智能物联网)技术的发展前景
【8月更文挑战第1天】AIoT技术作为人工智能与物联网的深度融合产物,正展现出广阔的发展前景。随着技术的不断进步和市场需求的持续增长,AIoT技术将在更多领域和场景发挥重要作用,推动社会向更加智能化、高效化的方向发展。
1022 6
基于kalman滤波的UAV三维轨迹跟踪算法matlab仿真
本文介绍了一种使用卡尔曼滤波(Kalman Filter)对无人飞行器(UAV)在三维空间中的运动轨迹进行预测和估计的方法。该方法通过状态预测和观测更新两个关键步骤,实时估计UAV的位置和速度,进而生成三维轨迹。在MATLAB 2022a环境下验证了算法的有效性(参见附图)。核心程序实现了状态估计和误差协方差矩阵的更新,并通过调整参数优化滤波效果。该算法有助于提高轨迹跟踪精度和稳定性,适用于多种应用场景,例如航拍和物流运输等领域。
961 12
|
缓存 Shell iOS开发
修改 torch和huggingface 缓存路径
简介:本文介绍了如何修改 PyTorch 和 Huggingface Transformers 的缓存路径。通过设置环境变量 `TORCH_HOME` 和 `HF_HOME` 或 `TRANSFORMERS_CACHE`,可以在 Windows、Linux 和 MacOS 上指定自定义缓存目录。具体步骤包括设置环境变量、编辑 shell 配置文件、移动现有缓存文件以及创建符号链接(可选)。
3605 2