Apache Flink Meetup 7.10 北京站,Flink x TiDB 专场等你来!

本文涉及的产品
实时计算 Flink 版,1000CU*H 3个月
简介: 7 月 10 日,Apache Flink Meetup 北京站,不见不散~

Flink,近年来广受欢迎,是最受认可的大数据计算引擎之一;TiDB 作为开源的 NewSQL 数据库也以其优秀的横向扩展能力和高可用特点,颇受业界的好评。那么当 Flink 遇上 TiDB,会迸发出怎样的火花呢?


Apache Flink 社区 Meetup 北京站又来啦


7月10日 | 北京 | 线下


Flink x TiDB 专场


本场 Meetup 将由 Flink 社区与 TiDB 社区合办。一如既往,我们邀请了各行业的技术大牛,来自阿里巴巴、TiDB、360、知乎、网易的 5 位技术专家将围绕 Flink 和 TiDB,分享如何实现准确稳定的实时计算业务、如何搭建实时数仓数据链路的最佳实践、如何利用两者的特点完成端对端实时计算的闭环交付,以及 Flink SQL 和 Flink-CDC 架构的感悟与实践等。


■ 活动亮点


  • 超多实用干货,Flink + TiDB 的结合能擦出怎样的火花,且看各位技术专家聚焦实时数据业务支撑、实时数仓、端到端实时计算等场景,用理论结合实践解析 Flink + TiDB 在各场景的应用。
  • 活动形式多样化,线下线上同步开启,同城可参与线下 Meetup 面对面交流,异地也可在线观看直播,精彩内容不错过;
  • 丰富周边等你拿,报名参加就有机会获得超多 Flink 社区定制的精美周边!


特别鸣谢 360 提供场地
■ 活动议程

image.png


▼ 立即报名


https://1712399719478.huodongxing.com/event/6601410216600


஑᩻ग़ Fli

 嘉宾及议题介绍



《JFlink on TiDB——便捷可靠的实时数据业务支撑》

林佳-圆.png

林佳

网易互娱技术中心实时开发工程师

Apache Flink Contributor


【嘉宾简介】


林佳,网易互娱计费数据中心实时业务负责人,实时开发框架 JFlink-SDK 和实时业务平台 JFlink 的主程。


【演讲简介】


近几年的实时计算领域,Flink 已经成为了最热门的开源框架;TiDB 便捷而可靠的  HTAP 融合型分布式特性使其在数据中心业务中被广泛应用。本次分享将从数据中心的计算案例出发,结合数据中心实时框架 JFlink-SDK 的设计哲学和对 TiDB 的使用方式,讨论如何实现在实际业务场景下准确稳定的实时计算业务。



《Flink + TiDB,体验实时数仓之美》

王天宜-圆.png

王天宜

TiDB 社区部门 架构师


【嘉宾简介】


王天宜,TiDB 社区部门架构师。曾就职于 Fidelity Investment,Softbank Investment,拥有丰富的数据库高可用方案设计经验,对于对 TiDB、Oracle、PostgreSQL、MySQL等数据库的高可用架构与数据库生态有深入研究。


【演讲简介】


实时数仓的进化历程- lambada 架构

- Kappa 架构

- 目前实时数仓的基本技术栈架构

TiDB + Flink 搭建实时数仓的数据链路

- TiDB 的基础架构与扩展性

- TiDB + Flink 实时数仓的架构

TiDB + Flink 的最佳实践



《TiDB x Flink 的端到端实时计算》

孙晓光-圆.png

孙晓光

知乎基础研发架构师;TiDB 社区 TOC 主席

TiKV Maintainer


【嘉宾简介】


孙晓光,知乎基础研发团队架构师,长期从事分布式系统相关研发工作关注云原生技术。


【演讲简介】


Flink 被普遍用于高实时性场景下的实时计算,而 TiDB 则被广泛应用于大数据量级下 OLTP 交易场景。TiDB 优秀的横向扩展能力使其成为 Flink 实时计算任务一个理想的下游数据库存储,更好的满足高吞吐低时延的实时计算结果存储需求。而 Flink 极强的扩展能力也能够为持续高吞吐写入的 TiDB 集群提供充足的计算能力,为大流量数据计算的实时性提供充分的保障。在缺乏原生 TiDB Flink 流式计算能力的过去,用户需要采用迂回的手段利用针对 MySQL 设计的工具实现 TiDB 数据的流或批计算。这不但增加了学习上的额外负担,还难以充分利用 TiDB 独有的架构特点提升系统的整体效率。在知乎整体在线数据库系统向 TiDB 过渡的过程中,我们迫切的感受到 TiDB x Flink 原生批流一体解决方案的重要性。本次分享将介绍知乎在 TiDB x Flink 批流一体方面的部分工作,并以实际业务为例介绍如何充分利用两者的特点完成端对端实时计算的闭环交付。



《Flink SQL 在 360 的实践》

image.gif张超明-圆.png

张超明

Apache Hudi Contributor360大数据平台研发工程师


【嘉宾简介】


张超明,360 大数据平台研发工程师。热爱技术,对大数据相关技术非常感兴趣,尤其是对于实时计算的原理和发展非常着迷。目前就职于 360 系统部,参与实时计算相关技术在司内的落地和推广,负责 Flink SQL 的产品化和优化。


【演讲简介】


随着公司的搜索、 金融、广告、游戏等业务的不断发展,通过实时计算推进业务价值的更快迭代成为了迫切的需求,Flink 作为目前在司内主推的实时计算引擎,在司内也愈加广泛地被使用。为了加快开发效率,降低开发人员的学习成本,我们积极鼓励用户使用 Flink SQL 进行作业开发。

本次分享将围绕 Flink SQL 在 360 的产品化落地过程,分享我们在 Flink SQL  上的一些感悟、实践与改进。



《详解 Flink-CDC》

雪尽-圆的副本.png

徐榜江

Apache Flink Contributor

阿里巴巴高级开发工程师


【讲师简介】


徐榜江(雪尽),阿里巴巴高级开发工程师,专注于 Flink SQL 引擎开发。


【演讲简介】


如何将数据库中的数据接入数据仓库/数据湖是数仓建设需要考虑的关键一环。本次分享,对比 传统数据同步方案 和 Flink-CDC 数据同步方案的优缺点,分析 Flink-CDC 架构的优势,同时分享Flink-CDC 2.0 设计方案, 详细解读无锁设计和全量阶段并发设计。


活动报名


■ 活动详情


线下场地位置有限,先到先得哦!更多 Flink 相关技术问题,可扫码加入社区钉钉交流群~


image.png

GitHub 地址

https://github.com/apache/flink

欢迎大家给 Flink 点赞送 star~



活动推荐


阿里云基于 Apache Flink 构建的企业级产品-实时计算Flink版现开启6月限时活动:

0元试用实时计算Flink版(包年包月、10CU)即可有机会获得 Flink 独家定制T恤;另包3个月及以上还有85折优惠!

了解活动详情:https://www.aliyun.com/product/bigdata/sc

image.png

相关实践学习
基于Hologres+Flink搭建GitHub实时数据大屏
通过使用Flink、Hologres构建实时数仓,并通过Hologres对接BI分析工具(以DataV为例),实现海量数据实时分析.
实时计算 Flink 实战课程
如何使用实时计算 Flink 搞定数据处理难题?实时计算 Flink 极客训练营产品、技术专家齐上阵,从开源 Flink功能介绍到实时计算 Flink 优势详解,现场实操,5天即可上手! 欢迎开通实时计算 Flink 版: https://cn.aliyun.com/product/bigdata/sc Flink Forward Asia 介绍: Flink Forward 是由 Apache 官方授权,Apache Flink Community China 支持的会议,通过参会不仅可以了解到 Flink 社区的最新动态和发展计划,还可以了解到国内外一线大厂围绕 Flink 生态的生产实践经验,是 Flink 开发者和使用者不可错过的盛会。 去年经过品牌升级后的 Flink Forward Asia 吸引了超过2000人线下参与,一举成为国内最大的 Apache 顶级项目会议。结合2020年的特殊情况,Flink Forward Asia 2020 将在12月26日以线上峰会的形式与大家见面。
相关文章
|
2月前
|
人工智能 数据处理 API
阿里云、Ververica、Confluent 与 LinkedIn 携手推进流式创新,共筑基于 Apache Flink Agents 的智能体 AI 未来
Apache Flink Agents 是由阿里云、Ververica、Confluent 与 LinkedIn 联合推出的开源子项目,旨在基于 Flink 构建可扩展、事件驱动的生产级 AI 智能体框架,实现数据与智能的实时融合。
349 6
阿里云、Ververica、Confluent 与 LinkedIn 携手推进流式创新,共筑基于 Apache Flink Agents 的智能体 AI 未来
|
存储 Cloud Native 数据处理
从嵌入式状态管理到云原生架构:Apache Flink 的演进与下一代增量计算范式
本文整理自阿里云资深技术专家、Apache Flink PMC 成员梅源在 Flink Forward Asia 新加坡 2025上的分享,深入解析 Flink 状态管理系统的发展历程,从核心设计到 Flink 2.0 存算分离架构,并展望未来基于流批一体的通用增量计算方向。
298 0
从嵌入式状态管理到云原生架构:Apache Flink 的演进与下一代增量计算范式
|
3月前
|
人工智能 运维 Java
Flink Agents:基于Apache Flink的事件驱动AI智能体框架
本文基于Apache Flink PMC成员宋辛童在Community Over Code Asia 2025的演讲,深入解析Flink Agents项目的技术背景、架构设计与应用场景。该项目聚焦事件驱动型AI智能体,结合Flink的实时处理能力,推动AI在工业场景中的工程化落地,涵盖智能运维、直播分析等典型应用,展现其在AI发展第四层次——智能体AI中的重要意义。
1152 27
Flink Agents:基于Apache Flink的事件驱动AI智能体框架
|
4月前
|
消息中间件 存储 Kafka
Apache Flink错误处理实战手册:2年生产环境调试经验总结
本文由 Ververica 客户成功经理 Naci Simsek 撰写,基于其在多个行业 Flink 项目中的实战经验,总结了 Apache Flink 生产环境中常见的三大典型问题及其解决方案。内容涵盖 Kafka 连接器迁移导致的状态管理问题、任务槽负载不均问题以及 Kryo 序列化引发的性能陷阱,旨在帮助企业开发者避免常见误区,提升实时流处理系统的稳定性与性能。
373 0
Apache Flink错误处理实战手册:2年生产环境调试经验总结
|
4月前
|
存储 分布式计算 数据处理
「48小时极速反馈」阿里云实时计算Flink广招天下英雄
阿里云实时计算Flink团队,全球领先的流计算引擎缔造者,支撑双11万亿级数据处理,推动Apache Flink技术发展。现招募Flink执行引擎、存储引擎、数据通道、平台管控及产品经理人才,地点覆盖北京、杭州、上海。技术深度参与开源核心,打造企业级实时计算解决方案,助力全球企业实现毫秒洞察。
482 0
「48小时极速反馈」阿里云实时计算Flink广招天下英雄
|
运维 数据处理 数据安全/隐私保护
阿里云实时计算Flink版测评报告
该测评报告详细介绍了阿里云实时计算Flink版在用户行为分析与标签画像中的应用实践,展示了其毫秒级的数据处理能力和高效的开发流程。报告还全面评测了该服务在稳定性、性能、开发运维及安全性方面的卓越表现,并对比自建Flink集群的优势。最后,报告评估了其成本效益,强调了其灵活扩展性和高投资回报率,适合各类实时数据处理需求。
|
存储 分布式计算 流计算
实时计算 Flash – 兼容 Flink 的新一代向量化流计算引擎
本文介绍了阿里云开源大数据团队在实时计算领域的最新成果——向量化流计算引擎Flash。文章主要内容包括:Apache Flink 成为业界流计算标准、Flash 核心技术解读、性能测试数据以及在阿里巴巴集团的落地效果。Flash 是一款完全兼容 Apache Flink 的新一代流计算引擎,通过向量化技术和 C++ 实现,大幅提升了性能和成本效益。
3603 73
实时计算 Flash – 兼容 Flink 的新一代向量化流计算引擎
zdl
|
消息中间件 运维 大数据
大数据实时计算产品的对比测评:实时计算Flink版 VS 自建Flink集群
本文介绍了实时计算Flink版与自建Flink集群的对比,涵盖部署成本、性能表现、易用性和企业级能力等方面。实时计算Flink版作为全托管服务,显著降低了运维成本,提供了强大的集成能力和弹性扩展,特别适合中小型团队和业务波动大的场景。文中还提出了改进建议,并探讨了与其他产品的联动可能性。总结指出,实时计算Flink版在简化运维、降低成本和提升易用性方面表现出色,是大数据实时计算的优选方案。
zdl
537 56
|
11月前
|
消息中间件 关系型数据库 MySQL
Flink CDC 在阿里云实时计算Flink版的云上实践
本文整理自阿里云高级开发工程师阮航在Flink Forward Asia 2024的分享,重点介绍了Flink CDC与实时计算Flink的集成、CDC YAML的核心功能及应用场景。主要内容包括:Flink CDC的发展及其在流批数据处理中的作用;CDC YAML支持的同步链路、Transform和Route功能、丰富的监控指标;典型应用场景如整库同步、Binlog原始数据同步、分库分表同步等;并通过两个Demo展示了MySQL整库同步到Paimon和Binlog同步到Kafka的过程。最后,介绍了未来规划,如脏数据处理、数据限流及扩展数据源支持。
673 0
Flink CDC 在阿里云实时计算Flink版的云上实践

相关产品

  • 实时计算 Flink版
  • 推荐镜像

    更多