实时数仓、1.10生产实践、AI 都来了,2020 首场 Flink 社区 Meetup,可!

本文涉及的产品
实时计算 Flink 版,1000CU*H 3个月
简介: 5月16日,2020 首场 Meetup 重磅上线。一如既往,本次 Meetup 邀请了来自袋鼠云、网易云音乐、有赞及阿里巴巴的四位技术专家为您现场直播,让您足不出户,有直播看、有干货学、有奖品拿~

好久不见,2020 你们心心念念的 Meetup 重磅回归啦!从二月到现在小松鼠收到诸多关于 Meetup 的咨询和大家的一些心声,比如:

2020 Meetup 还有吗?什么时候办?
有没有 1.10 的生产环境实践,我想下手又犹豫不决
最近假期宅在家不能出门太无聊了,你们要不要搞点活动
作为 Flink 发烧友,没T恤不专业!我什么时候能拿到?

▼ 满足大家的心愿,机会来了 !▼

5月16日,2020 首场 Meetup 重磅上线。一如既往,本次 Meetup 邀请了来自袋鼠云、网易云音乐、有赞及阿里巴巴的四位技术专家为您现场直播,让您足不出户,有直播看、有干货学、有奖品拿~

640.png

本次 Meetup 您将了解:

  1. 如何基于 Flink 实现分布式数据同步,原理是怎样的?
  2. 火了那么久的实时数仓在网易云音乐有哪些应用实践?
  3. 1.10 在生产环境中的实战,有赞的 Flink SQL 经验分享
  4. 揭秘 Flink 在 AI 场景中你知道或不知道的应用
  5. 多种丰富的社区周边送送送
  6. 高清画中画模式直播,体验好到爆

5月16日下午14:00-18:00,Flink 社区直播间不见不散!扫描下方二维码或点击下方链接即可马上报名~

# 报名链接 #
https://developer.aliyun.com/live/2772

640-2.png

《袋鼠云基于 Flink 实现的分布式数据同步工具 FlinkX 》

徐超 | Flink contributor,袋鼠云 资深技术专家

640-3.png

嘉宾介绍:

徐超,袋鼠云资深技术专家,Flink contributor,负责袋鼠云云原生一站式数据中台 PaaS-数栈从0到1的产品研发;参与的数栈产品应用于大型政企、金融、教育、新零售等行业客户,曾负责京东方、招商证券、宁波发改委、浙大、票付通等典型客户的数据中台项目的技术服务;目前专注于 Flink 实时计算周边扩展,包括袋鼠云 FlinkX、Flink Stream SQL 开源项目。

演讲简介:

一、为什么选择基于 Flink 实现

  1. 分布式,简单的并发配置
  2. 易于扩展
  3. 高效性
    二、整体结构(包括架构图)

三、如何实现控制并发和限流(原理和实现)
四、增量同步,断点续传(原理和实现)
五、实时采集(原理和实现)
六、当前版本插件的支持情况和未来的开发计划

《网易云音乐实时数仓实践》

汪磊 | 网易 数据平台开发专家

640.jpeg

嘉宾介绍:

汪磊,网易数据平台开发专家,目前负责云音乐实时、离线、以及机器学习平台的建设工作。

演讲简介:

云音乐随着业务的发展,对实时计算业务的需求越来愈多,要求越来越高,平台遇到挑战也越来越大。为了降低实时计算开发的门槛,更好的管控实时任务,提升系统的稳定性,我们整合了我们已有的底层服务开发了适合云音乐的实时数仓方案。

本次分享主要介绍我们整体的实践方案,面临的一些问题,以及未来的一些规划,整体大纲如下:

  1. 云音乐整体数据平台架构介绍
  2. 云音乐 Flink 实时数仓和元数据中心整合
  3. 目前面临的问题和挑战
  4. 批流一体的实践和规划

《Apache Flink SQL 1.10 在有赞的实践应用》

沈磊 | 有赞数据研发工程师

640-2.jpeg

嘉宾介绍:

沈磊,英文名 LakeShen,目前在有赞负责实时计算平台、以及 Flink 计算引擎相关研发和维护工作。积极参与 Flink 开源社区,喜欢和大家分享 Flink 技术,个人也写了很多 Flink 相关技术文章,帮助大家一起学习 Flink。

演讲简介:

本次演讲主要讲解 1.10 版本 Flink SQL 在有赞的实践应用,以及为什么选择 Flink SQL 。主要内容包括:

  1. 实时平台 Flink SQL 开发实践
  2. Flink Connector 的实践和优化
  3. Flink SQL 在有赞的业务支撑

《Apache Flink 在 AI 流程中的应用》

涂轶文(应言)| 阿里巴巴开发工程师

640-3.jpeg

嘉宾介绍:

涂轶文,花名应言,2019年7月加入阿里巴巴,担任开发工程师,专注于 Flink AI 生态领域的开发yiwen.png。

演讲简介:

在如今的 AI 场景中,Flink 在流模式下得天独厚的优势给 AI 的发展带来了更多的可能,为了能够更好地支持 AI 在不同场景下的发展,Flink 社区和 Flink 的生态项目也在不断地努力着,本文将介绍 Flink 在 AI 场景中的应用,主要内容包括:

  1. Background on Flink embracing AI
  2. What is AI flow
  3. Meet Flink AI flow
  4. An ML scenario

5月16日(下周六)下午14:00-16:00,我们在直播间期待您的到来!如果您还有其他感兴趣的主题、对社区的建议、喜欢的周边欢迎联系小松鼠(微信:Ververica2019),我们小本本记下来,下期给大家安排!

BTW,别忘了点击下方链接预约报名哦~

https://developer.aliyun.com/live/2772

相关实践学习
基于Hologres轻量实时的高性能OLAP分析
本教程基于GitHub Archive公开数据集,通过DataWorks将GitHub中的项⽬、行为等20多种事件类型数据实时采集至Hologres进行分析,同时使用DataV内置模板,快速搭建实时可视化数据大屏,从开发者、项⽬、编程语⾔等多个维度了解GitHub实时数据变化情况。
相关文章
|
1月前
|
SQL 人工智能 JSON
Flink 2.1 SQL:解锁实时数据与AI集成,实现可扩展流处理
简介:本文整理自阿里云高级技术专家李麟在Flink Forward Asia 2025新加坡站的分享,介绍了Flink 2.1 SQL在实时数据处理与AI融合方面的关键进展,包括AI函数集成、Join优化及未来发展方向,助力构建高效实时AI管道。
484 43
|
1月前
|
SQL 人工智能 数据挖掘
Apache Flink:从实时数据分析到实时AI
Apache Flink 是实时数据处理领域的核心技术,历经十年发展,已从学术项目成长为实时计算的事实标准。它在现代数据架构中发挥着关键作用,支持实时数据分析、湖仓集成及实时 AI 应用。随着 Flink 2.0 的发布,其在流式湖仓、AI 驱动决策等方面展现出强大潜力,正推动企业迈向智能化、实时化的新阶段。
251 9
Apache Flink:从实时数据分析到实时AI
|
1月前
|
SQL 人工智能 JSON
Flink 2.1 SQL:解锁实时数据与AI集成,实现可扩展流处理
本文整理自阿里云的高级技术专家、Apache Flink PMC 成员李麟老师在 Flink Forward Asia 2025 新加坡[1]站 —— 实时 AI 专场中的分享。将带来关于 Flink 2.1 版本中 SQL 在实时数据处理和 AI 方面进展的话题。
163 0
Flink 2.1 SQL:解锁实时数据与AI集成,实现可扩展流处理
|
1月前
|
SQL 人工智能 API
Apache Flink 2.1.0: 面向实时 Data + AI 全面升级,开启智能流处理新纪元
Apache Flink 2.1.0 正式发布,标志着实时数据处理引擎向统一 Data + AI 平台迈进。新版本强化了实时 AI 能力,支持通过 Flink SQL 和 Table API 创建及调用 AI 模型,新增 Model DDL、ML_PREDICT 表值函数等功能,实现端到端的实时 AI 工作流。同时增强了 Flink SQL 的流处理能力,引入 Process Table Functions(PTFs)、Variant 数据类型,优化流式 Join 及状态管理,显著提升作业稳定性与资源利用率。
178 0
|
18天前
|
人工智能 运维 Java
Flink Agents:基于Apache Flink的事件驱动AI智能体框架
本文基于Apache Flink PMC成员宋辛童在Community Over Code Asia 2025的演讲,深入解析Flink Agents项目的技术背景、架构设计与应用场景。该项目聚焦事件驱动型AI智能体,结合Flink的实时处理能力,推动AI在工业场景中的工程化落地,涵盖智能运维、直播分析等典型应用,展现其在AI发展第四层次——智能体AI中的重要意义。
271 22
Flink Agents:基于Apache Flink的事件驱动AI智能体框架
|
11天前
|
存储 JSON 数据处理
Flink基于Paimon的实时湖仓解决方案的演进
本文源自Apache CommunityOverCode Asia 2025,阿里云专家苏轩楠分享Flink与Paimon构建实时湖仓的演进实践。深度解析Variant数据类型、Lookup Join优化等关键技术,提升半结构化数据处理效率与系统可扩展性,推动实时湖仓在生产环境的高效落地。
106 0
Flink基于Paimon的实时湖仓解决方案的演进
|
1月前
|
SQL 存储 运维
Apache Doris 在菜鸟的大规模湖仓业务场景落地实践
本文介绍了 Apache Doris 在菜鸟的大规模落地的实践经验,菜鸟为什么选择 Doris,以及 Doris 如何在菜鸟从 0 开始,一步步的验证、落地,到如今上万核的规模,服务于各个业务线,Doris 已然成为菜鸟 OLAP 数据分析的最优选型。
148 2
Apache Doris 在菜鸟的大规模湖仓业务场景落地实践
|
20天前
|
存储 人工智能 监控
淘宝闪购基于Flink&Paimon的Lakehouse生产实践:从实时数仓到湖仓一体化的演进之路
本文整理自淘宝闪购(饿了么)大数据架构师王沛斌在 Flink Forward Asia 2025 上海站的分享,深度解析其基于 Apache Flink 与 Paimon 的 Lakehouse 架构演进与落地实践,涵盖实时数仓发展、技术选型、平台建设及未来展望。
179 0
淘宝闪购基于Flink&Paimon的Lakehouse生产实践:从实时数仓到湖仓一体化的演进之路
|
1月前
|
存储 人工智能 数据处理
对话王峰:Apache Flink 在 AI 时代的“剑锋”所向
Flink 2.0 架构升级实现存算分离,迈向彻底云原生化,支持更大规模状态管理、提升资源效率、增强容灾能力。通过流批一体与 AI 场景融合,推动实时计算向智能化演进。生态项目如 Paimon、Fluss 和 Flink CDC 构建湖流一体架构,实现分钟级时效性与低成本平衡。未来,Flink 将深化 AI Agents 框架,引领事件驱动的智能数据处理新方向。
188 6
|
4月前
|
存储 消息中间件 OLAP
基于 Flink+Paimon+Hologres 搭建淘天集团湖仓一体数据链路
本文整理自淘天集团高级数据开发工程师朱奥在Flink Forward Asia 2024的分享,围绕实时数仓优化展开。内容涵盖项目背景、核心策略、解决方案、项目价值及未来计划五部分。通过引入Paimon和Hologres技术,解决当前流批存储不统一、实时数据可见性差等痛点,实现流批一体存储与高效近实时数据加工。项目显著提升了数据时效性和开发运维效率,降低了使用门槛与成本,并规划未来在集团内推广湖仓一体架构,探索更多技术创新场景。
1140 3
基于 Flink+Paimon+Hologres 搭建淘天集团湖仓一体数据链路

相关产品

  • 实时计算 Flink版