数字化与数据中台的价值思考——徐季秋

本文涉及的产品
阿里云百炼推荐规格 ADB PostgreSQL,4核16GB 100GB 1个月
简介: 数据中台是指通过数据技术,对海量数据进行采集、计算、存储、加工,同时统一标准和口径。数据中台把数据统一之后,会形成标准数据,再进行存储,形成大数据资产层,进而为客户提供高效服务。狭义的数据中台单指数据技术,比如对海量数据进行采集、计算、存储、加工的一系列技术集合,时下我们谈到的数据中台还包括数据模型,算法服务,数据产品,数据管理以及方法论。本篇主要从传统企业数字化转型的角度,浅析了数字中台的价值。

阿里巴巴的数字化价值

数据中台的概念是阿里提出来的, 所以讲述数据中台的价值的时候,不可避免要把数据中台对于阿里的价值说清楚。我认为阿里巴巴首次把自己数字化能力展示出来的实践窗口是2015的双11大屏,而以前主要形式是年度的行业报告。大屏对于当时整个业务实时展现,把背后牵扯的数据处理能力展示的淋漓尽致。

阿里的核心电商业务,本身是完全数字化的。从进入淘宝的首页到搜关键字,找到具体的宝贝,加购,支付,后面的物流,所有的一切,全部是通过自己的信息化系统来完成了一整个的业务闭环,所以它本身是一个完全数字化的东西。

在这个过程当中,沉淀了大量的用户行为数据、商品交易数据、物流数据还有售后数据,基于这些数据,整个阿里内部的数据团队做了大量的针对于自己业务的数字赋能提升。

这些数据最大的价值,主要体现在三方面:首先是广告,即精准营销。阿里巴巴的千亿美元的市值,很多是建立在广告的基础上;另外一个是推荐,阿里GMV超过15%是由推荐系统直接带来的;最后是整个电商内部的交易安全。可以看到在阿里内部的整个数字化的场景,其实是跟互联网行业高度吻合的。因为互联网行业里面大数据的应用场景其实主要就是体现在广告,推荐和风控。这三大板块对阿里的商业帝国起到了至关重要的作用,除此之外,在内部则主要体现在精细化的数字化运营。

这里引发出一个思考:广告、推荐和风控的价值是数据中台的价值还是算法的价值?算法是否可以脱离中台直接产生价值? 中台的价值针对于这三个算法场景提供什么样的价值?

最初,淘系、天猫、聚划算都有自己独立的推荐团队,但现在是统一的团队。当初每一个团队基本上都是使用自己的基础数据,因为在公共层项目前用户数据、商品数据都不是打通的。

2013-2014年,阿里启动了数据公共层项目,这个项目的出发点是节省资源和统一基础数据。因为当时整个阿里云包括算法团队等各个团队,所用到的分析的集群已经远远超过了5000台,按照当时的规模,如果不做数据公共层这个项目的话,每年都要在新购资源上面花费1亿多。启动这个项目之后,让算法工程师的工作起点从数据源搬移到公共层之上,不用去处理庞大的基础数据信息的工作,以便快速交付算法场景。

接下来大家没想到的是,数据公共层这个项目越做越有价值。它不仅达到了最初的目的,还把整个公司集团的用户数据和商品数据做了一个统一的管理。

所以对于企业来讲,做数字化转型是首先思考的是应用场景,由此来思考针对场景是否需要一个统一的数据中台。砍树优先还是磨刀优先,这应该是每一个企业的决策人需要思考的问题,应该有自己的一套认知。

传统企业数字化的必要性和重要性

现在的传统企业数字化转型越来越迫切了,我个人觉得主要是因为互联网企业带来的压力,因为互联网企业是直接面向终端客户运营的。
1、互联网企业本身是数字化运营的,所以它具有更敏捷的业务转型能力和业务调整能力。
2、借助自己的流量的优势,不断对传统企业进行降维打击,它的业务边界延伸越来越长。如果说传统企业完全不做一条类似于互联网企业的数字化的生意的话,必然面临来自互联网企业的竞争.比如各种C to XX。
3、传统公司业务无法在线, 但是业务数字可以在线, 通过数字化运营进行反攻。通过数据技术和算法去切入业务流,形成一个智能化的闭环,然后让企业的生产经营全过程都可度量和可预测。

把概念清晰化,从企业决策人角度来讲,做数字化转型之前应该问自己三个问题:
1.你是否清楚了解企业过去的经营情况和当前的业务情况?
2.是否对企业当前的经营情况,组织情况,都了然于心?
3.对未来所作的决策,不论转型也好,场景优化也好,是否有数可依?

所以企业数字化转型一个很大的意义在于,不再依赖于下属汇报的各种各样的数据,而是通过数字化的系统来获取这部分数据。传统企业现在的数据可能大部分来源于企业信息化过程当中所产生可公开的数据,如传感器、操作设备。传统企业在数据方面的最大弊端,在于没有触达最终客户端,缺少了全量用户的声音,往往只能参考一个取样的声音。这也是说互联网公司拿到用户的声音去降维打击传统企业的一个原因。

实时数据更有价值

我们跳出来看看传统企业会有哪些数据。数据可以总结为以下4份:用户日志的数据,各种统计的数据,业务系统的数据,还有整个业务过程的数据。盘点下来之后,再从时间维度分为不同的量级。比如毫秒、秒级产生的数据、分钟级数据,年度报表则是年度级的数据。从时间轴的角度来讲,不同时效性的数据会有不同的价值。对于不同的企业来讲,可能不同时效性的数据价值的重要程度就不一样。对5G,loT这种较为巨大的行业场景来说,会更关注时效性低的一些数据,可以对于未来企业的战略方向做一些准备。对于目前很多传统的经营企业来讲,可能更关注天级、月级的数据,因为那是代表企业业务过程的。并且由于业务部门信息化数据的不完整,很多较大企业依然靠人为上报数据,这种情况下,数据则集中在天级左右。

对于不同的用户来讲,对于数据在不同的维度上的关注也是不同的。比如说时效性大概在秒级的数据,可能是系统运维的人员比较关注的,因为要保障整个系统的使用,不能宕机。那对于开发来讲,主要是要做到问题诊断,有可能就是在运维的数据之上。有一部分运营,比如说阿里小二,更注重实时,因为包含运维运营的各种安全性。对于业务数字的运营,则可能在天级以上。前面提到阿里的三个最大的场景,基本上都应用的是实时数据。这也是目前所认为的趋势,实时数据的价值往往比离线数据价值大。

通用算法方面,实时数据的时序预测方法是可以直接运用在实际处理上的,根本不需要再做各种离线算法在场景下面的各种数据清理和特征构造。所以对于时序数据来讲,可以直接把算法服务作用在时序数据上,比如aws开放的forecast服务。

其次,也更有助于我们关注场景通用模型。现在大部分企业都在建自己的终端客户渠道,建设了之后,免不了就会收集到大量的终端渠道的用户行为数据。它包含就是各种各样的用户行为,比如点击浏览、跳转,在体现用户行为分析的基础上,我们的这个产品内置各种各样的公开的漏洞分析、留存分析、还有用户画像等产品。实时数据可以帮助我们玩转模型。

数据中台在实际场景中的解决方案

以某医疗器械公司为例,由于业务线分支庞大,数据的汇报则标准不一,就给决策造成了难题。而用数据中台则可以完美地解决这个问题。

2.png

问题概况


3.png

解决方案

数据中台的项目以数据场景的咨询为入口。从产品销售分析的角度,业务预测和预警的角度,销售过程管理的角度,客户分析的角度,运营成本管理的角度,还有渠道管理的角度做大量的规划和设计。

在之前,只能用销售分析的系统处理报表数据,用客户画像系统处理客户数据,是重复造轮子的一个怪圈。而阿里已经帮我们探了路,可以用数据中台这个方案来解决问题,磨刀不误砍柴工。就可以避免这个情况了。

另外,不管是对数据处理的逻辑的复杂程度,还是对于数据处理的技术上的要求,数据处理依然是很复杂的过程。所以一定需要数据中台的产品再加上方法论,来将原始数据转换成可以直接给数据分析和数据挖掘人员去做实用的基础。而数据中台本身就是一个工具性的产品和工具性的方法论。

传统数据中台的实施路径

指定完整的规划,统一架构平台,统一标准规范,然后按照数据源做统一的数据采集,再做统一的数仓设计,形成统一的数据资产,最后再基于统一的数据资产做各种各样的数据运用。

在实施过程中,基于数据应用的维度上做一个敏捷数据中台开发,以数据应用为交付单位。在交互数据应用的过程中,慢慢形成整个企业的数据中台,是不小的挑战。但收获也会很大,包括对数据技术的深入了解,阿里云的数据产品的理解,还有对整个行业知识的理解。这些都赋予我们思索数据中台的价值的能力,以及抽象模型的能力。

4.png

驻云实施数据中台的两条路

最后,在了解了业务、产品、组织、系统后,知晓过去,理清现在,判断未来。如此,才能做好适合的中台架构设计。

相关实践学习
阿里云百炼xAnalyticDB PostgreSQL构建AIGC应用
通过该实验体验在阿里云百炼中构建企业专属知识库构建及应用全流程。同时体验使用ADB-PG向量检索引擎提供专属安全存储,保障企业数据隐私安全。
AnalyticDB PostgreSQL 企业智能数据中台:一站式管理数据服务资产
企业在数据仓库之上可构建丰富的数据服务用以支持数据应用及业务场景;ADB PG推出全新企业智能数据平台,用以帮助用户一站式的管理企业数据服务资产,包括创建, 管理,探索, 监控等; 助力企业在现有平台之上快速构建起数据服务资产体系
相关文章
|
供应链 安全 BI
【年终特辑】看见科技创新力量 洞见时代创业精神—交通物流—瓦肯科技:专注汽车后服务市场,通过数字化创新创造价值
【年终特辑】看见科技创新力量 洞见时代创业精神—交通物流—瓦肯科技:专注汽车后服务市场,通过数字化创新创造价值
102 0
|
机器学习/深度学习 人工智能 Cloud Native
【大数据趋势白皮书下载】IDC: 发挥数据智能价值,推动企业数字化创新
IDC认为,从提升企业中长期发展质量、降低综合投入成本的角度出发,大数据技术领域将呈现出两个显著趋势:一体化和融合化。企业应以战略和顶层设计为先导,用体系化的思维全面构建大数据能力架构,避免形成新的数据、业务和能力孤岛。 【下载地址见文末】
【大数据趋势白皮书下载】IDC: 发挥数据智能价值,推动企业数字化创新
|
存储 搜索推荐 数据挖掘
LinkFlow CDP科普篇05:客户数据中台,当代数字化营销的顶梁柱
客户数据中台(CDP)的出现,打破了现有的SaaS营销栈格局
181 0
|
运维 监控 Cloud Native
阿里云云原生加速器成员企业袋鼠云创始人陈吉平:深耕国产自研数字化技术与服务,持续为客户创造价值
如今,袋鼠云已成功服务 5000 多家客户,涵盖金融、政务、教育、制造等 20+行业。11 月初,袋鼠云刚刚宣布完成过亿元 C+轮融资。袋鼠云秉承着“让数据产生价值”的使命,以科技创新驱动发展,不断迭代优化解决方案和生态结构,其中与阿里云的合作不得不说。
阿里云云原生加速器成员企业袋鼠云创始人陈吉平:深耕国产自研数字化技术与服务,持续为客户创造价值
|
新零售 存储 人工智能
阿里巴巴胡臣杰:以数字化思维驱动营销变革与持续增长 2022全球数字价值峰会
做数字化转型最好的时间是五年前,其次最好的时间就是现在。
216 0
阿里巴巴胡臣杰:以数字化思维驱动营销变革与持续增长 2022全球数字价值峰会
|
新零售 存储 人工智能
复盘|数字化转型,鲁商集团从数据中台“下手”
从2019年确定转型方向到今天,鲁商集团真切地感受到了数据中台搭建完成后,对企业管理多层面的提升。对鲁商集团而言,数据中台的搭建,好比夯实数字化转型的基础,下一步才是转型的目标:利用数据中台释放出来的数据能力,反哺到各业务条线。
658 0
复盘|数字化转型,鲁商集团从数据中台“下手”
|
人工智能 前端开发 机器人
从物种进化到价值再造,致远互联助力企业数字化转型升级
从物种进化到价值再造,致远互联助力企业数字化转型升级
208 5
从物种进化到价值再造,致远互联助力企业数字化转型升级
|
机器学习/深度学习 人工智能 自然语言处理
体验 共享 智能 开放:四大理念重塑企业数字化平台价值
体验 共享 智能 开放:四大理念重塑企业数字化平台价值
346 0
体验 共享 智能 开放:四大理念重塑企业数字化平台价值
|
新零售 数据可视化 物联网
连通新零售,助推数字化,智能电子价签还蕴含多大的应用价值?
编辑语: 应用速递栏目:应用速递是面向IoT厂商推荐芯片开放社区(OCC)上的典型应用案例,便于IoT厂商精准获取方案,快速实现产品落地。
209 0
连通新零售,助推数字化,智能电子价签还蕴含多大的应用价值?
|
供应链 数据可视化 数据挖掘
解决方案应用实例 |搭载数据中台引擎,香飘飘实现数字化转型
香飘飘通过与阿里云数据中台合作,形成一套全域数据中台解决方案,统一运营自身的全域消费者资产,最终在拉新上实现了3.5倍的增长。
374 0
解决方案应用实例 |搭载数据中台引擎,香飘飘实现数字化转型