实时计算在天猫双十一大屏中的应用

本文涉及的产品
实时计算 Flink 版,5000CU*H 3个月
简介: 案例与解决方案汇总页:阿里云实时计算产品案例&解决方案汇总本文为您介绍实时计算在天猫双十一大屏业务中的应用。天猫双十一大屏背后最强大最核心的支持力量来自于阿里云实时计算。曾经天猫双十一大屏后台流式计算使用开源的Storm来进行开发,整个开发时间长达一个月。
+关注继续查看

案例与解决方案汇总页:
阿里云实时计算产品案例&解决方案汇总


本文为您介绍实时计算在天猫双十一大屏业务中的应用。


天猫双十一大屏

天猫双十一大屏背后最强大最核心的支持力量来自于阿里云实时计算。曾经天猫双十一大屏后台流式计算使用开源的Storm来进行开发,整个开发时间长达一个月。现在使用阿里云实时计算 SQL,将整个双十一大屏的开发周期缩短到一周,并且由于阿里云实时计算底层完全屏蔽了故障处理、执行优化,最终上线的阿里云实时计算作业比Storm更快、更高效。

下面是天猫双十一整体数据流图。天猫使用了阿里云实时计算平台,让整体处理链路变得更加稳定和高效。


双十一
  1. 用户在线抢购

    海量的天猫用户使用天猫的购买系统进行双十一抢购活动。在天猫交易的高峰期,如11日凌晨0点的诸多秒杀活动,整个实时计算的面临的顶峰性能可能高达数十万订单/秒。

  2. 数据实时采集

    数据采集系统将数据库变更日志采集并进入DataHub系统。使用阿里集团内部的数据库变更日志复制计算(阿里云对应的产品名称为DTS),在线交易数据库即使在零点最高峰交易时段,也可以保证在数秒内将数据写入DataHub。

  3. 数据实时计算

    阿里云实时计算订阅上述DataHub的流式数据,持续读取并计算截止到当前时间点的天猫成交总和。阿里云实时计算单机群规模达数千台,支持吞吐量可达百万级/秒,可以轻松应对天猫每秒数十万笔的交易量。实时计算对数据进行实时的订阅和实时的计算,并将结果数据即时的写入到在线的RDS系统中。

  4. 前端可视化展现

    前端数据可视化组件团队为天猫双十一大屏专门定制了翻牌器、全球交易热点等诸多酷炫内容。前端服务器将定期轮询RDS系统,并利用Web前端技术实现双十一大屏的震撼效果。

相关实践学习
基于Hologres轻松玩转一站式实时仓库
本场景介绍如何利用阿里云MaxCompute、实时计算Flink和交互式分析服务Hologres开发离线、实时数据融合分析的数据大屏应用。
Linux入门到精通
本套课程是从入门开始的Linux学习课程,适合初学者阅读。由浅入深案例丰富,通俗易懂。主要涉及基础的系统操作以及工作中常用的各种服务软件的应用、部署和优化。即使是零基础的学员,只要能够坚持把所有章节都学完,也一定会受益匪浅。
目录
相关文章
|
2月前
|
资源调度 Kubernetes Java
Flink--2、Flink部署(Yarn集群搭建下的会话模式部署、单作业模式部署、应用模式部署)
Flink--2、Flink部署(Yarn集群搭建下的会话模式部署、单作业模式部署、应用模式部署)
|
5月前
|
消息中间件 SQL 缓存
货拉拉基于 Flink 计算引擎的应用与优化实践
货拉拉实时研发平台负责人王世涛,在Flink Forward Asia 2022 平台建设专场的分享。
551 3
货拉拉基于 Flink 计算引擎的应用与优化实践
|
5月前
|
SQL 消息中间件 存储
Apache Flink 在翼支付的实践应用
翼支付高级大数据工程师尹春光,在 Flink Forward Asia 2022 行业案例专场的分享。
578 0
Apache Flink 在翼支付的实践应用
|
5月前
|
传感器 存储 数据采集
Flink 在新能源场站运维的应用
中南电力设计院工程师、注册测绘师姚远,在 Flink Forward Asia 2022 行业案例专场的分享。
439 2
Flink 在新能源场站运维的应用
|
7月前
|
SQL Prometheus 资源调度
《Apache Flink 案例集(2022版)》——2.数据分析——蔚来汽车-Apache Flink 在蔚来汽车的应用(上)
《Apache Flink 案例集(2022版)》——2.数据分析——蔚来汽车-Apache Flink 在蔚来汽车的应用(上)
151 0
|
7月前
|
存储 消息中间件 SQL
《Apache Flink 案例集(2022版)》——2.数据分析——蔚来汽车-Apache Flink 在蔚来汽车的应用(下)
《Apache Flink 案例集(2022版)》——2.数据分析——蔚来汽车-Apache Flink 在蔚来汽车的应用(下)
151 0
|
7月前
|
存储 机器学习/深度学习 SQL
《Apache Flink 案例集(2022版)》——3.机器学习——众安保险-Flink 在 众安保险金融业务的应用(1)
《Apache Flink 案例集(2022版)》——3.机器学习——众安保险-Flink 在 众安保险金融业务的应用(1)
105 0
|
7月前
|
机器学习/深度学习 监控 搜索推荐
《Apache Flink 案例集(2022版)》——3.机器学习——众安保险-Flink 在 众安保险金融业务的应用(2)
《Apache Flink 案例集(2022版)》——3.机器学习——众安保险-Flink 在 众安保险金融业务的应用(2)
95 0
|
7月前
|
机器学习/深度学习 存储 监控
《Apache Flink 案例集(2022版)》——3.机器学习——众安保险-Flink 在 众安保险金融业务的应用(3)
《Apache Flink 案例集(2022版)》——3.机器学习——众安保险-Flink 在 众安保险金融业务的应用(3)
95 0
|
7月前
|
机器学习/深度学习 存储 人工智能
《Apache Flink 案例集(2022版)》——3.机器学习——众安保险-Flink 在 众安保险金融业务的应用(4)
《Apache Flink 案例集(2022版)》——3.机器学习——众安保险-Flink 在 众安保险金融业务的应用(4)
119 0
相关产品
实时计算 Flink版
推荐文章
更多