从0到1,云服务助力全民直播快速构建大数据平台

本文涉及的产品
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介: 随着业务的快速发展,全民直播如何应对来自技术与运营方面的挑战?6月7日,在上海世博中心,2018云栖大会·上海峰会阿里云支持与服务专场上,全民直播大数据架构师朱益发表主题演讲,详细介绍了从0到1,云服务助力全民直播快速构建大数据平台的过程。

随着业务的快速发展,全民直播如何应对来自技术与运营方面的挑战?6月7日,在上海世博中心,2018云栖大会·上海峰会阿里云支持与服务专场上,全民直播大数据架构师朱益发表主题演讲,详细介绍了从0到1,云服务助力全民直播快速构建大数据平台的过程。

IMG_0510

全民直播于2015年12月底上线,是一家涵盖游戏、娱乐、户外等多领域泛娱乐的直播平台。其每日的百万级UV,亿级PV以及百GB日志量,在行业内虽然不算最大体量,但直播行业的高实时性与强互动性对平台的稳定性与视频流的流畅度都有非常高的要求。朱益现场表示:为了应对上述技术挑战,全民直播需要进行全方位的系统监控,如异常报警与流量预警等,同时要实现快速定位问题与及时响应,并持续优化各种性能,如终端性能、视频优化等。此外,随着业务的快速发展,用户运营、主播价值、内容推荐、市场营销以及平台营收等运营需求也必须被满足。所以,全民直播最终决定通过构建大数据平台来解决上述问题。

在构建大数据平台的过程中,全民直播面临着成本紧张、如何选型工具、海量数据如何保证稳定以及数据安全等问题。经过积极探索,全民直播最终选择借助阿里云来实现。朱益现场解释道:通过阿里云构建大数据平台可以实现几乎零运维成本来支撑海量数据,同时使用门槛也非常低,非研发人员能独立完成数据报表需求。从稳定性上看,上线一年半,大数据平台几乎无故障且服务人员响应非常及时。此外,阿里云表级权限管理保证了高安全性,组件即开即用的特点也非常灵活,可以实现用最少的资源去试错。

___0_1_

朱益现场还分享了数据采集、数据体系建立、元数据管理、数据分析挖掘、数据报表等内容的实战经验与应用推荐。此外,朱益特别强调了对于直播平台来说,视频流是核心服务,其稳定性直接影响到用户体验,继而影响平台收益。为满足直播视频实时护航的需求,阿里云支持与服务为全民直播配备了专属技术服务经理,通过钉钉群提供7x24小时实时响应,保证了视频流的稳定性。

最后,朱益表示通过阿里云构建大数据平台,可以让企业更加专注业务,实现在用户分群、主播挖掘以及内部推荐上实现精细化运营。未来全民直播将继续借助阿里云成熟的技术与经验,深耕视频直播业务,满足直播行业不断演进的大数据需求。

一键订阅

云服务月刊

微博阿里云客户满意中心

头条号阿里云服务

知乎号阿里云服务

相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
相关文章
|
1月前
|
机器学习/深度学习 算法 大数据
构建数据中台,为什么“湖仓一体”成了大厂标配?
在大数据时代,数据湖与数据仓库各具优势,但单一架构难以应对复杂业务需求。湖仓一体通过融合数据湖的灵活性与数据仓的规范性,实现数据分层治理、统一调度,既能承载海量多源数据,又能支撑高效分析决策,成为企业构建数据中台、推动智能化转型的关键路径。
|
4月前
|
SQL 分布式计算 大数据
大数据新视界 --大数据大厂之Hive与大数据融合:构建强大数据仓库实战指南
本文深入介绍 Hive 与大数据融合构建强大数据仓库的实战指南。涵盖 Hive 简介、优势、安装配置、数据处理、性能优化及安全管理等内容,并通过互联网广告和物流行业案例分析,展示其实际应用。具有专业性、可操作性和参考价值。
大数据新视界 --大数据大厂之Hive与大数据融合:构建强大数据仓库实战指南
|
2月前
|
存储 SQL 分布式计算
MaxCompute x 聚水潭:基于近实时数仓解决方案构建统一增全量一体化数据链路
聚水潭作为中国领先的电商SaaS ERP服务商,致力于为88,400+客户提供全链路数字化解决方案。其核心ERP产品助力企业实现数据驱动的智能决策。为应对业务扩展带来的数据处理挑战,聚水潭采用MaxCompute近实时数仓Delta Table方案,有效提升数据新鲜度和计算效率,提效比例超200%,资源消耗显著降低。未来,聚水潭将进一步优化数据链路,结合MaxQA实现实时分析,赋能商家快速响应市场变化。
112 0
|
7月前
|
SQL 存储 HIVE
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
本文整理自鹰角网络大数据开发工程师朱正军在Flink Forward Asia 2024上的分享,主要涵盖四个方面:鹰角数据平台架构、数据湖选型、湖仓一体建设及未来展望。文章详细介绍了鹰角如何构建基于Paimon的数据湖,解决了Hudi入湖的痛点,并通过Trino引擎和Ranger权限管理实现高效的数据查询与管控。此外,还探讨了湖仓一体平台的落地效果及未来技术发展方向,包括Trino与Paimon的集成增强、StarRocks的应用以及Paimon全面替换Hive的计划。
684 1
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
|
6月前
|
SQL 存储 HIVE
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
384 2
|
7月前
|
存储 分布式计算 大数据
基于阿里云大数据平台的实时数据湖构建与数据分析实战
在大数据时代,数据湖作为集中存储和处理海量数据的架构,成为企业数据管理的核心。阿里云提供包括MaxCompute、DataWorks、E-MapReduce等在内的完整大数据平台,支持从数据采集、存储、处理到分析的全流程。本文通过电商平台案例,展示如何基于阿里云构建实时数据湖,实现数据价值挖掘。平台优势包括全托管服务、高扩展性、丰富的生态集成和强大的数据分析工具。
|
1月前
|
机器学习/深度学习 运维 监控
运维不怕事多,就怕没数据——用大数据喂饱你的运维策略
运维不怕事多,就怕没数据——用大数据喂饱你的运维策略
61 0
|
2月前
|
数据采集 分布式计算 DataWorks
ODPS在某公共数据项目上的实践
本项目基于公共数据定义及ODPS与DataWorks技术,构建一体化智能化数据平台,涵盖数据目录、归集、治理、共享与开放六大目标。通过十大子系统实现全流程管理,强化数据安全与流通,提升业务效率与决策能力,助力数字化改革。
84 4
|
2月前
|
分布式计算 DataWorks 数据处理
在数据浪潮中前行:记录一次我与ODPS的实践、思考与展望
本文详细介绍了在 AI 时代背景下,如何利用阿里云 ODPS 平台(尤其是 MaxCompute)进行分布式多模态数据处理的实践过程。内容涵盖技术架构解析、完整操作流程、实际部署步骤以及未来发展方向,同时结合 CSDN 博文深入探讨了多模态数据处理的技术挑战与创新路径,为企业提供高效、低成本的大规模数据处理方案。
180 3

热门文章

最新文章