科技云报道原创。
如果说,过去是数字化转型的试验阶段,实施的是开荒动土、选种育苗,那么当前要进行的是精耕细作、植树造林。
数字化转型已进入了由个别行业、个别场景的“点状应用”向各行各业全流程、全环节“整体渗透”的关键期。
云计算、大数据和人工智能深度融合,已成为企业数字化转型历程中最核心的能力平台。其中,“数智融合”正在让AI和数据释放更多价值,更好地驱动企业创新。
破土:以“数智融合”重塑数据价值
对于数智化概念,可以简单地理解成数字化与智能化的结合。
其本质是万物互联,第一层次是连接;第二层次是数据价值提炼;第三层次是效率应用赋能,将数据的价值落地到应用场景。
要做到“数智融合”,离不开大数据技术和人工智能技术两大关键要素。
从大数据角度来看,数据是整个应用程序业务逻辑的核心,也是每个组织数字化转型的基石。
据福布斯调研报告,如果成为数据驱动型公司,企业收入将增加20%,成本将减少30%,达到降本增效的目标。
同时借助人工智能技术,可以极大提高处理业务数据的效率、增强业务分析和洞察力,从而改善客户体验并优化业务流程,助力企业实现跨越式增长。
据麦肯锡相关报告所示,人工智能在市场营销和销售、战略和企业融资以及供应链管理方面对收入增长的推动效果显著:79%的使用了人工智能的营销和销售团队实现了收入的同比增长;72%的供应链管理团队今年也实现了收入同比增长。
人工智能与大数据正在形成多方位深度融合发展趋势,不断加速各行业的数字化升级。
一方面,大数据提供数据采集、数据存储、数据转换、数据分析和可视化的能力,为人工智能技术的发展提供数据燃料。有了大数据平台的海量数据,人工智能才有了质的突破。
另一方面,人工智能也为大数据发展带来算力提升和算法引擎,让人们能够以前所未有的速度和效率挖掘数据价值。
在场景融合方面,人工智能拓宽了大数据的应用场景。
传统的数据分析实现了描述性分析、诊断性分析,而融合人工智能技术的大数据分析可以实现更智能化的预测性分析与处理决策分析。
尽管数智融合已成为各行业不可逆的趋势,但企业要想实现数智化、实现高效的数据治理,仍面临多方面的挑战,比如:
在原有技术下,“数据量+成本+效率”已经成为“不可能三角”,无法做到平衡与兼顾;
数据壁垒既高且厚,数据孤岛现象严重,导致持有成本、管理成本、使用门槛“三高”;
引擎不互通,各平台间的算力资源独享,导致资源利用率低,成本高居不下;
开发工具割裂严重,工作协同难度大,导致数据准备工作复杂而低效。
各项因素的叠加将影响数据的价值被充分利用,让企业敏捷决策和创新变得困难。
生根:让AI与数据持续释放价值
如果把数智融合的升级之路比喻成建房子,那么企业到底应该如何打好地基、协作建设流程、精益建造成本呢?
在洞察到企业数据治理难、技术门槛高、系统繁杂、架构割裂等挑战后,华为云结合内部的实践,汇集大量专家,梳理出了一套帮助企业发挥数据价值的方法。
在4月14日举行的“数据之道·知行派”高峰论坛上,华为云EI服务产品部部长尤鹏介绍了数智融合平台——由数据治理生产线DataArts和AI开发生产线ModelArts融合的独家架构,该平台可让数据和AI开发进入现代化的生产阶段,加速企业数智化转型。
华为云EI服务产品部部长 尤鹏
首先,作为数智融合的最小单元,即一座房子的最小原材料,通用的数据是数智融合平台建设的根基,它需要在平台上无缝流动,才能让大数据实现个性化应用,进而产生价值。
如果出现数据孤岛现象,将影响数据价值发挥、进而影响AI深入业务核心系统。
华为云数智融合平台可以实现融合数据管理,基于DataArts LakeFormation,把数仓、数据湖、AI数据的目录、数据权限、事务一致性、多版本管理等能力都融合到一个中心点,支持一份数据在数据湖、数据仓库、AI、开源系统等多个引擎间自由共享,帮助企业用数更敏捷。
其次,当“建筑原材料”数据开始具备流动性,下一项任务则该解决数据库、数据仓库、数据湖、AI引擎不互通的问题。
我们可以把这过程理解为提升不同工种的建筑工人的协作能力。
在传统开发工作中,各平台间的算力资源通常是独享的,这导致资源利用率低,企业投入成本高居不下。
华为云数智融合平台是名副其实的“数据+AI”融合的开发平台。华为云将云上丰富的AI能力封装进数据治理生产线DataArts当中,支持DataOps、MLOps、DevOps无缝协同,帮助数据工程师以及业务人员以简单、熟悉的工具/语言,以拖拉拽的方式在全域数据内使用预置AI算法。
在这过程中,华为云数智融合平台一方面真正打通大数据和人工智能,让数据开发、治理全链路智能化;另一方面以低代码的方式降低数据和模型的开发、运维门槛。
最后,降本增效是每个企业非常重视的目标,尤其是在世界变局加快演变、国内经济下行的背景下,当业务在不断增长,对云基础设施投入在不可避免地增加,企业如何平衡数据量+成本+效率问题?
华为云数智融合平台可以实现存储-缓存-计算三层分离。
以“和面”这一生活化场景进行类比,当数据需要较强的计算能力时,假如需要存储能力跟着扩容,这是十分不合理的,将产生类似“面多了加水、水多了继续加面”的恶性循环。
理想的方案是把数据放到同一份OBS上,做到存算分离,同时基于华为云ModelArts的自动缓存技术,让本地热点技术可以直接本地访问,无需经过网络处理。
所以,华为云三层分离架构主要解决存储、缓存、计算三者能力不匹配的问题,该技术可以让存储空间节省20%以上,实现极致性价比。
据介绍,华为云数智融合平台由数据治理生产线DataArts和AI开发生产线ModelArts“双引擎”构成。
其中,华为云数据治理生产线DataArts是一站式数智融合开发与治理的综合平台,涵盖GaussDB(DWS)数据仓库、MRS云原生数据湖、DLI数据湖探索、DataArts Studio数据治理中心、GaussDB数据库等服务,瞄准企业数据资产全流程管理,包括数据产生、数据整合、数据分析、数据交易等,解决企业数据孤岛式、碎片化分布难题,使能数据可控流转,大幅提升数据治理的效率,使开发者从繁重枯燥的数据处理工作中解放出来,将更多精力投入开发创新活动,进而为企业与客户带来明显的价值提升。
相关数据显示,华为云数据治理生产线DataArts当前在华为内部已生产出10多万个高质量的数据资产;在外部服务了3000家以上的政企客户,每天有千万级数据任务在云上运行。
而华为云AI开发生产线ModelArts是AI开发的一站式平台,提供数据处理、算法开发、模型训练、模型管理、模型部署等AI应用开发全流程技术能力,让企业可以做专业的AI开发和稳定可靠的AI运营。
ModelArts平台提供三层加速,通过弹性调度、融合调度、自动混部等调度能力实现资源极致利用,综合分配率可达到90%,支撑数据和AI开发工作更高效:
数据加速DataTurbo:通过分布式缓存能力为模型训练提供PB级缓存,TB级读取带宽,将数据读取时延降低至亚毫秒级,可为上千个物理及容器应用节点提供高性能支持,加载速度提升可达5倍。
训练加速TrainTurbo:综合利用内存优化、模型自动切分、动态路由规划等技术,减少37%训练耗时,分布式训练自动容错将恢复时间从24小时降低到分钟级。
推理加速InferTurbo:基于异构算子融合、异构多核并行推理优化等技术,提供2倍性能提升。
此外,华为云AI开发生产线ModelArts还分别提供通用场景套件和行业场景套件。
在通用领域,华为云提供盘古基础大模型、ModelArts Pro文字识别/自然语言处理/视觉/声音套件等多样化AI开发工具,方便企业和开发者在华为云的平台上高效进行微调和二次开发。
在细分行业领域,华为云在盘古CV、NLP、科学计算大模型的基础上,面向不同业务场景,推出矿山、药物分子、电力、气象、海浪等盘古行业大模型。
华为云还与行业ISV携手,打造9个AI Usecase,包括产品质检、工艺优化、生产排程、智慧访销等。
这些AI Usecase和5万多个AI资产都沉淀在华为云AI平台上,帮助开发者基于海量的AI资产进行商业实践,提升AI开发的效率,推动项目的平均交付时间从月级降到天级。
正所谓“无治理、不分析”,没有高质量的数据,就不会有智能的AI。
大数据和AI技术相互激发、相辅相成,共同推进彼此的发展,助力业务持续释放价值,可以说是数字化时代的两把“金钥匙”。
** 发芽:让数智价值惠及千行百业**
当下,数智融合在千行百业逐步实现应用及落地,这让更多企业在转型的道路上走得更稳、更有力量。
随着数字化转型已然进入深水区,面对企业数字化的新挑战,华为云持续从技术创新、行业融合等方面,助力金融、教育、零售、保险、政务等行业的数字化转型。
比如在金融领域,民生银行基于华为云MRS云原生数据湖服务和GaussDB(DWS)数据仓库,以一体化开发、一体化运维、一体化应用、一体化管理为建设目标,启动融合型湖仓平台项目建设。
基于华为云湖仓一体技术,民生银行实现“一湖+多样集市”,支撑离线、实时、AI、BI四大场景,大幅降低数据流转成本,也为数据赋能业务夯实工作基础。
民生银行数据管理部资深专家 刘伟
光大银行基于华为云GaussDB(DWS)的高迁移效率,仅用6个月时间,就将数万个批量任务迁至华为云。
光大银行数据资产部处长王瑜在华为云“数据之道·知行派”高峰论坛表示:“华为云让银行数据在早晨八点半前实现‘数据开门’,创造了金融数仓运行新速度。”
光大银行数据资产部处长王瑜
在电力行业,国网天津市电力公司是业内首个采用华为云Stack MRS全栈实时数据湖能力的国企。“电力营销2.0系统上线后,灵活报表决策、电费快报时延降至5分钟,电费测算提效14倍。我们以实际行动践行‘人民电业为人民’的企业宗旨,为天津市700余万用电客户提供更优质的供用电服务,为社会经济发展贡献电网力量。”国网天津电力数字化部处长倪家明表示。
国网天津市电力公司数字化部处长 倪家明
在制造领域,“全球玻璃大王”信义集团联合华为云展开全面的数据治理,以数据使能咨询为牵引,构建企业数据资产管理体系,制定1200+数据标准和300+数据指标,自动采集超40万点位的生产设备状态、工艺数据,每天处理3亿多条数据记录,帮助信义集团全域数据融通共享。
华为副董事长、轮值董事长、CFO孟晚舟今天在2023华为全球分析师大会上表示,基于华为云数智融合技术,信义集团产线的天然气能耗大幅降低,每年节省上亿元费用。华为云成功地让数据“说话”,让生产决策更精准,为企业带来实实在在的收益。
华为云还支撑了海螺水泥“工业大脑”的建设。
首先,帮助海螺水泥统一了数据标准,建立了数据资产模型,完成了数据资源全景梳理,为企业生产迈向数据驱动的新阶段扫清障碍。
其次,华为云通过两级工业物联平台的构建与IT&OT数据的打通,成功将生产大数据与AI融合应用。
此外,华为云以统一的IT/OT数据汇聚分析为基础,为海螺水泥构建了具备感知、记忆、认知与决策能力的生产大数据平台,实现了对各区域工厂产线设备的横向对比、纵向寻优,对产线状态的智能化实时监控与精确调整。
海螺水泥工业互联网创新室主任王书信表示,双方合作的全椒海螺试点工厂实现近100%工艺参数值在线自动设定,分解炉温度稳定性提升40%以上,窑况异常率减少50%以上,出窑熟料质量稳定性提升40%以上,人员劳动强度降低了24%以上,成效显著。
海螺水泥工业互联网创新室主任 王书信
数智融合这一把火,已从星星之火渐成燎原之势,并在千行百业落地生花。
结语
面对数字化时代大潮,传统行业数字化转型迫在眉睫。
将数据和智能进行有效融合的“数智融合”解决方案,是破题的关键,可让AI和数据释放更多价值。
华为云将数据和智能进行融合统一,持续赋能传统企业实现数据治理和资产沉淀,为更多企业进行数字化和智能化升级构筑起坚实的创新基石。
【关于科技云报道】
专注于原创的企业级内容行家——科技云报道。成立于2015年,是前沿企业级IT领域Top10媒体。获工信部权威认可,可信云、全球云计算大会官方指定传播媒体之一。深入原创报道云计算、大数据、人工智能、区块链等领域。