创新场景|“耳朵经济”快速增长背后,数据价值是如何释放的?

本文涉及的产品
阿里云百炼推荐规格 ADB PostgreSQL,4核16GB 100GB 1个月
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介: 通过大数据平台+数据中台的建设,喜马拉雅重构了数据底座,真正具备了更稳定、更高效、更智能化的应用数据的能力。

云栖战略参考 2023版头_副本.png

《云栖战略参考》由阿里云与钛媒体联合策划,呈现云计算与人工智能领域的最新技术战略观点与业务实践探索,希望这些内容能让您有所启发。


作为耳朵经济发展的领军者,喜马拉雅坐拥数以亿计的月活流量,却没有停止创新和思考,如何让这个庞大的用户群体有更好的体验,并在庞大的数据基础上进一步实现商业创新。

 

数据显示,2021年时中国在线音频市场的复合年增长率已经超过了60%,预计2026年市场规模将增长至1204亿元人民币。喜马拉雅看到了音频市场在终端应用方面(如天猫精灵和汽车内嵌系统)有着市场巨大的潜力。

 

向来注重技术投入的喜马拉雅以科技赋能文化,站在一个新的角度重新思考产品创新、业务创新,以更好地服务客户,让客户满意,并基于对用户的高质量服务来实现商业价值。

 

以数字技术让喜马拉雅实现突破,成为公司寻找新增长的重要抓手。正如喜马拉雅创始人兼CEO余建军曾表示——喜马拉雅是一家科技驱动的内容公司,科技是手段,文化是目的。

 

大数据上云

 

20128月,喜马拉雅在上海诞生。历经十余年的耕耘,喜马拉雅成为中国在线音频市场的领跑者

 

据公开数据显示,2022年前三季度,喜马拉雅全场景月活跃用户达2.82亿,包括1.22亿移动端平均月活跃用户,移动端用户日均收听时长为140分钟。2021年,喜马拉雅移动端主应用程序平均月活跃用户在中国在线音频应用程序中排名第一。截至2021年年底,喜马拉雅已累积了包含超过100个品类的3.4亿条音频内容。

 

用户量庞大,停留时间长,这是很多平台难以企及的数据。但喜马拉雅并未止步,一直在思考,在新的技术时代,如何用高质量的服务来实现商业价值。由此也引发了喜马拉雅对未来架构以及大数据、AI等技术的思考和决策——打造面向未来的云原生大数据平台,使得数据基建未来更有效地支持业务的长期发展。

 

从业务需求而言,AI技术应用对底层数据的需求是数据存储更多、计算更快、弹性扩容能力更强;管理层精准决策对数据的需求是统一数据口径、数据更精准、更实时;数据平台要足够弹性敏捷,支持业务洪峰增长。

 

阿里巴巴集团副总裁,阿里云智能互联网&新金融事业部总经理刘伟光给出的建议是:大数据就是未来,将数据上云,构建云原生大数据平台,激活更多数据价值,基于数据精准、智能决策,解决业务发展的关键战略问题。

 

这与喜马拉雅CTO姜杰,基于垂类场景领先的AI和数据能力,结合业务流程的数智化升级,驱动喜马拉雅的产品与服务不断创新的技术思考高度一致——喜马拉雅技术团队对于重构数据底座的决心,以及为未来布局大数据和AI,正是喜马拉雅决定业务全面上云的核心因素。

 

彼时,阿里云推出了新一代云原生数据湖3.0技术,还手握绝对领先的数据中台建设、智能数据决策多方面经验,双方一拍即合。

 

于是,喜马拉雅下一个十年的开端,多了一位新伙伴——阿里云。

 

全面提速

 

在大数据上云这件事上,喜马拉雅之所以会选择阿里云,一个原因就是阿里云拥有过硬的数据技术实力以及非常成熟的大数据产品体系;此外,还有很重要一点,即阿里云在开放开源方面也做得很好。

 

阿里云的开源大数据平台可以兼容业界开源大数据协议,在合作的过程中,我们也能感受到阿里云开源开放的态度,这点非常符合喜马拉雅坚持走开源大数据的发展理念。喜马拉雅大数据工程负责人陈叶超强调。

 

据陈叶超回忆,喜马拉雅从2022年初决定了数据上云的发展方向后,开始与阿里云接触合作,并在2022年上半年探索落地了大数据混合云方案,有了混合云架构的落地经验,大数据相关业务也感受到了弹性云原生带来的敏捷便利性,同时打消了技术上的一些顾虑,在20227月开始与阿里云接触全面的上云方案,并在202211月达成合作意向,确定了采用基于开源的大数据平台+数据中台的形式,推进云原生大数据战略。

 

确定了数据上云的发展理念,选定了伙伴,下一步就要一起奔赴目标。

 

喜马拉雅数据上云主要希望达成四个目标:首先,新架构要满足未来发展需求,同时满足数据以及AI的场景;其次,新的系统要足够弹性,能做到伸缩自如;再次,要高度兼容现有系统;最后,在技术升级的过程中,能够不中断业务,并能对现有系统进行梳理优化。我们希望能在技术升级的同时,对现有的数据架构同时进行优化,并具备支持AI场景的能力。陈叶超指出。

 

根据喜马拉雅上述需求,在2022年初,喜马拉雅与阿里云一起落地了大数据混合云架构,数据依然存储在IDC资源中,同时调用云上资源补充传统IDC机房平台的计算资源缺口,在短时间内满足了喜马拉雅数据量、计算量大的需求。

 

混合云架构验证了阿里云开源大数据的产品能力,到20226月,为了全面升级云原生大数据战略,喜马拉雅与阿里云开始基于阿里云全新一代数据湖技术——阿里云数据湖3.0,构建了存算分离的云原生大数据平台,正式开启了大数据全面上云之路。

 

这是一套敏捷、灵活、成本更低的存算分离体系,彻底颠覆了原本在Hadoop体系下存算一体的数据平台,以及传统IDC架构无法灵活扩容、缩容等痛点,同时还大幅降低了大数据运维成本,提升了数据产出效率。

 

双方利用包括EMR Hadoop+OSS-HDFSEMR StarRocksEMR KafkaEMR Clickhouse等在内的多个技术,全面重构了喜马拉雅大数据底座。

 

双方这一系列合作都是基于阿里云EMR架构进行的,这与喜马拉雅秉持开源技术的思考不谋而合,这也是促成双方合作的重要因素之一。

 

阿里云EMR架构与业界所有开源协议兼容,免去了系统改造的困扰,阿里云互联网解决方案架构师张春华表示,该架构可以在不破坏客户原有系统的前提下,为客户提供一个高效、稳定、安全的开源环境,降低客户迁移成本,确保0故障、0打扰迁移上云。

 

当然,在数据上云的过程中,除了开源外,喜马拉雅也存在与其他企业数据上云时一样的顾虑——业务间断风险。陈叶超表示,业务不能间断是喜马拉雅数据上云的前提之一。

 

为了确保业务的连续性,喜马拉雅技术团队与阿里云团队一起反复打磨上云方案,最终选择了双跑作为数据迁移的方式,我们在云上云下分别建立了两套新系统,以及相应的资源,然后结合平台进行适配。以双跑的形式完成了丝滑、零故障的过渡。陈叶超指出。

 

与此同时,喜马拉雅还与阿里云合作建设企业数据中台。喜马拉雅大数据总负责人郑栋表示:喜马拉雅希望通过建设数据中台,让业务决策敏捷、智能、精准,驱动企业经营效率提升,实现业务价值。

 

在搭建数据中台的过程中,阿里云基于瓴羊“1+N+N”的数智化决策与运营实践,以及QuickBI产品在帮助喜马拉雅构建自己的数智决策系统中起到了关键作用。

 

通过QuickBI产品,瓴羊与喜马拉雅共建了自上而下的决策分析体系,提升了企业内部人员数据分析的效率,实现业务流程和数据分析直接协同,构建了数据消费和价值洞察的企业文化。

 

如何通过计算、存储等能力,将数据真正用起来,实现数据资产化,并为业务发展提供指引,这是数据底座所具备的核心能力。正如刘伟光所言,大数据上云是实现数据资产化中重要的一步。

 

实时湖仓一体、AI创新产品.....共创未来更多可能

 

通过大数据平台+数据中台的建设,喜马拉雅重构了数据底座,真正具备了更稳定、更高效、更智能化的应用数据的能力。

 

喜马拉雅大数据全面上云架构升级后,实现了秒级弹性伸缩,减少了数万张表,任务性能提升40%以上,即席查询性能提升30%以上,大幅提升的数据的时效性和开发效率。

 

在此基础上,陈叶超表示,喜马拉雅接下来还将和阿里云这个志同道合的合作伙伴共同推进云上大模型AI创新、实时湖仓一体等技术的落地,为未来产业发展进行布局。

 

以实时湖仓一体技术为例,该技术对于类似喜马拉雅这种在线音频互联网企业,以及诸如淘宝、天猫等在线购物应用企业而言,是寻找新的增长点的重要抓手。

 

通过实时湖仓一体技术,可以在短时间内快速抓住用户的兴趣点,通过用户浏览、搜索等行为,进行更智能化的推荐。通过定制化的服务,为企业提供精准营销,提升用户洞察和服务。

 

通过云计算的能力,能对过去不能实时计算、实时化处理的数据,实现实时化处理,阿里云和喜马拉雅正在公共云上探索一条没有人走过的路。刘伟光说。

 

除了湖仓一体技术外,据喜马拉雅CTO姜杰介绍,借助阿里云的E-MapReduceOSS-HDFS,我们构建了喜马拉雅云原生大数据平台,并结合喜马拉雅领先的情感语音AI,推动业务创新,为用户提供更优质的内容消费和更智能的语音交互体验。

 

据了解,喜马拉雅开发出基于语音对话的大模型,与传统的文本转语音(TTS)技术不同。传统TTS要求声音输入的清晰度非常高,通常需要录制8小时以上的语音才能进行模型训练。但是,喜马拉雅语音对话大型模型采用了一种全新的方法。它只需要用户录入不超过10句的语音内容,然后通过后台的语音对话大型模型进行训练和推理,就能够生成具有韵律、语调和口气的人工智能语音内容。更令人兴奋的是,这个模型还可以实现"Zero-Short"语音音色的输出,使用户能够用自己的声音来聆听播客、有声书、新闻等内容。在新的数据底座的支持下,这项将AI与大数据结合的新尝试也得以照进现实

 

喜马拉雅和阿里云的种种尝试,正走在整个互联网行业的最前沿,致力于抓住智能时代的机会。在未来诸多不确定性中,有一点可以确定——云计算将构建AI进步的算力基石。

 

在新的数据底座之上,喜马拉雅的AI、大数据应用也将大放光彩。阿里云也将始终秉持开源开放的态度,以长期合作伙伴的角色陪伴客户共同探索更好的技术驱动,共同前行。


本文摘自《云栖战略参考》2023年10月刊

扫码限时申领纸质版

↓↓

公众号外宣1080x1920.jpg

相关实践学习
AnalyticDB MySQL海量数据秒级分析体验
快速上手AnalyticDB MySQL,玩转SQL开发等功能!本教程介绍如何在AnalyticDB MySQL中,一键加载内置数据集,并基于自动生成的查询脚本,运行复杂查询语句,秒级生成查询结果。
阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
云原生数据仓库AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库,高度兼容MySQL协议以及SQL:92、SQL:99、SQL:2003标准,可以对海量数据进行即时的多维分析透视和业务探索,快速构建企业云上数据仓库。 了解产品 https://www.aliyun.com/product/ApsaraDB/ads
目录
相关文章
|
2月前
|
机器学习/深度学习 人工智能 分布式计算
理解并利用大数据的力量:解锁数据背后的价值
【8月更文挑战第7天】大数据已成为推动社会进步和经济发展的重要力量。通过理解并利用大数据的力量,企业可以解锁数据背后的价值,优化业务流程、提升决策效率和创新能力。然而,大数据应用也面临着诸多挑战和风险,需要企业不断学习和实践以应对。相信在未来的发展中,大数据将为我们带来更多的惊喜和机遇。
|
11月前
|
存储 人工智能 Cloud Native
耳朵经济快速增长背后,喜马拉雅数据价值如何释放 | 创新场景
喜马拉雅和阿里云的合作,正走在整个互联网行业的最前沿,在新的数据底座之上,喜马拉雅的AI、大数据应用也将大放光彩。本文摘自《云栖战略参考》
46789 5
耳朵经济快速增长背后,喜马拉雅数据价值如何释放 | 创新场景
|
5月前
|
运维 安全 搜索推荐
智能时代对传统商业地产有哪些颠覆性的影响
智能时代对传统商业地产有哪些颠覆性的影响
2022制造业路在何方?拓展网络市场空间为大方向。
世界制造看中国,中国制造看山东,山东工信厅为深入拓展山东制造业网络市场空间,以流量券补贴的方式支持企业参加“山东制造·网行天下”网上拓市场活动。
2022制造业路在何方?拓展网络市场空间为大方向。
|
存储 人工智能 运维
云湖共生-释放企业数据价值
摘要:2021云栖大会云原生企业级数据湖专场,阿里云智能资深技术专家、对象存储 OSS 负责人罗庆超为我们带来《云湖共生-释放企业数据价值》的分享。本文主要从数据湖存储演进之路、数据湖存储3.0 进化亮点等方面分享了云湖共生带来的企业价值。
云湖共生-释放企业数据价值
|
人工智能
观点 | 地产数字化和智能化发展,或成疫情期间行业核心思考
未来地产公司在智慧化和数字化发展趋势的三大变化:空间在线化、服务智能化、生态协同化
1041 0
|
新零售
中国互联网企业出海差距何在?又会带来什么影响?
以支付宝为例,其于2014年起即与GlobalBlue在退税服务达成战略合作,覆盖欧洲5000多家商户;同时,百度地图也已于2016年覆盖全球209个国家地区,并确定了从服务中国旅客、提升服务质量、逐渐成为当地居民常用地图的国际化蓝图。
1925 0
|
大数据 云计算
云计算时代,互联网金融背后的想象空间
本文讲的是云计算时代,互联网金融背后的想象空间,阿里巴巴在纽交所的开市钟史无前例的由八位合作伙伴敲响,可见阿里对互联网时代构筑起生态系统的坚持。这其中,由余额宝所敲开的互联网金融热潮的热度持续不减,传统金融企业已经由最初的“畏惧”转而主动拥抱这汹涌而来的大潮。
1578 0