Apache Flink Meetup 8.7 深圳站,企业实践 + 1.14 版本预热

本文涉及的产品
实时计算 Flink 版,5000CU*H 3个月
简介: 深圳,好久不见~ 8 月 7 日 Apache Flink Meetup,同学们快来报名~

时隔 10 个月,Apache Flink Meetup 又来到了深圳这个与 Flink 契合度很高的城市。正如改革和创新是深圳的标签,Apache Flink 给技术开发者们带来的,也是摒弃旧的 “批处理” 思维,迎接新的 “流批一体” 趋势。那么本次的 Meetup 将会在深圳这座充满希望的城市给同学们带来哪些内容呢?


Apache Flink 社区 Meetup,深圳好久不见~


8月7日 | 深圳 | 线下


企业实践 + 1.14 新特性预览


本场 Meetup 邀请了来自腾讯、第四范式、阿里巴巴的 4 位资深行业技术专家,将分享 Flink 如何帮助腾讯搭建万亿级实时数据入湖利器 Auto Optimizer Service,以及开发智能化的故障诊断和配置监控工具;又如何帮助第四范式建立 OpenMLDB 数据库实时更新系统。除了企业实践的分享外Flink 1.14 版本的新特性预览也将会在本场 Meetup 中带给大家


■ 活动亮点


  • 超多实用干货,企业如何借助 Flink 的高实时,低延迟解决万亿级实时数据入湖、智能诊断与监控的问题?另外,Flink 1.14 版本又会带来哪些值得期待的功能特性与体验优化?
  • 活动形式多样化,线下线上同步开启,同城可参与线下 Meetup 面对面交流,异地也可在线观看直播,精彩内容不错过!
  • 丰富周边等你拿,报名参加就有机会获得超多 Flink 社区定制的精美周边!如最新专刊 & 马克杯~



■ 活动议程

36EC1FE9-E8AF-48D7-966A-223BD78705DA.pngimage.gif


▼ 立即报名

https://huodongxing.com/event/4607482627500

image.gif

嘉宾及议题介绍


《Flink 实时作业的智能诊断和配置》

F702C81F-B559-4E42-9680-DF7C090BE8DD.pngimage.gif

施晓罡

腾讯大数据计算平台负责人


【嘉宾简介】


目前担任腾讯大数据计算平台负责人。2016 年毕业于北京大学,获得博士学位。Apache Flink 项目 Committer。在 SIGMOD, TODS 和 IPDPS 等国际顶级会议和期刊上发表过多篇论文,并担任 KDD,DASFAA 等国际会议程序委员会委员。在大数据、查询优化和分布式计算等领域有着丰富的工作经验。


【演讲简介】


腾讯内部统一的实时计算平台,支持了视频号、腾讯广告和财付通在内的许多业务,每天处理的数据超过了 65 万亿。相比于传统的离线大数据作业,实时作业需要 7x24 小时不间断运行并保证以较低的延迟处理海量动态变化的数据,因此给开发和运维带来了非常大的挑战。为了降低用户的开发门槛和运维难度,我们开发了智能化的故障诊断和配置监控工具,帮助用户及时定位问题,合理配置作业资源和并行度,并实时监控作业运行状态。


《万亿级实时数据入湖利器 - Auto Optimizer Service》

image.gifFDAB6E8F-4068-4B1A-A1DD-80216FE87C59.png

徐前进

Apache Calcite Committer

腾讯数据湖研发高级工程师



【嘉宾简介】


多年大数据工作经验,开源大数据组件 Flink、 Iceberg、Pulsar 等贡献者,Apache Calcite Committer。


【演讲简介】


本次分享核心讲解万亿级实时数据入湖利器 Auto Optimizer Service 的背景、原理及实现。本次分享主要围绕以下四个方面:

一、背景及痛点
二、架构与用例场景
三、设计原理与实现
四、未来的发展与思考


《基于 Flink 的 OpenMLDB 数据库实时更新系统》

A137DFF4-E2A6-497C-B9C6-1FBD443B2BFF.png

陈迪豪

OpenMLDB 开源项目 PMC

第四范式平台架构师



【嘉宾简介】


陈迪豪,第四范式平台架构师,OpenMLDB 开源项目 PMC。目前就职第四范式,曾担任小米云深度学习平台架构师以及优思德云计算公司存储和容器团队负责人。活跃于分布式系统、机器学习相关的开源社区,是 HBase、OpenStack、TensorFlow、TVM 等开源项目贡献者。通过了 AWS Solution Architect 认证,并在 Austin OpenStack Summit、CPP Summit、Strata Hadoop Conference、ML Summit、ECUG、GIAC、BDTC 等国内外会议上做过技术分享。


【演讲简介】


OpenMLDB 是一个面向机器学习应用提供正确、高效数据供给的开源数据库。基于 Flink 流式计算框架,实现了高性能的 AI 数据实时更新系统,无论是离线的样本数仓还是在线的预估服务,只需一次数据引入就可以满足模型训练数据更新以及在线数据回流等 AI 落地需求。


《Flink 1.14 新特性预览》

81D77624-4904-404E-AABA-3BFE9B11CC9F.png

宋辛童(五藏)

Apache Flink PMC Member & Committer

阿里巴巴技术专家


【嘉宾简介】


Apache Flink PMC Member & Committer,阿里巴巴技术专家,北京大学博士。目前就职于阿里云开源大数据团队,主要负责 Flink 分布式运行时、资源管理、部署等模块的研发工作,同时也是 Flink 1.14 的 Release Manager。


【演讲简介】


Flink 1.14 发布在即,新版本将为大家带来哪些值得期待的功能特性与体验优化呢?本次分享将带你提前了解 Flink 1.14 一些主要的新特性,介绍其应用场景及原理,以及这背后的长期目标与规划。


活动报名


■ 立即报名

https://huodongxing.com/event/4607482627500


■ 活动详情

相关实践学习
基于Hologres轻松玩转一站式实时仓库
本场景介绍如何利用阿里云MaxCompute、实时计算Flink和交互式分析服务Hologres开发离线、实时数据融合分析的数据大屏应用。
Linux入门到精通
本套课程是从入门开始的Linux学习课程,适合初学者阅读。由浅入深案例丰富,通俗易懂。主要涉及基础的系统操作以及工作中常用的各种服务软件的应用、部署和优化。即使是零基础的学员,只要能够坚持把所有章节都学完,也一定会受益匪浅。
相关文章
|
3月前
|
存储 人工智能 大数据
The Past, Present and Future of Apache Flink
本文整理自阿里云开源大数据负责人王峰(莫问)在 Flink Forward Asia 2024 上海站主论坛开场的分享,今年正值 Flink 开源项目诞生的第 10 周年,借此时机,王峰回顾了 Flink 在过去 10 年的发展历程以及 Flink社区当前最新的技术成果,最后展望下一个十年 Flink 路向何方。
414 33
The Past, Present and Future of Apache Flink
|
4月前
|
SQL 运维 网络安全
【实践】基于Hologres+Flink搭建GitHub实时数据查询
本文介绍了如何利用Flink和Hologres构建GitHub公开事件数据的实时数仓,并对接BI工具实现数据实时分析。流程包括创建VPC、Hologres、OSS、Flink实例,配置Hologres内部表,通过Flink实时写入数据至Hologres,查询实时数据,以及清理资源等步骤。
|
10天前
|
SQL 存储 HIVE
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
本文整理自鹰角网络大数据开发工程师朱正军在Flink Forward Asia 2024上的分享,主要涵盖四个方面:鹰角数据平台架构、数据湖选型、湖仓一体建设及未来展望。文章详细介绍了鹰角如何构建基于Paimon的数据湖,解决了Hudi入湖的痛点,并通过Trino引擎和Ranger权限管理实现高效的数据查询与管控。此外,还探讨了湖仓一体平台的落地效果及未来技术发展方向,包括Trino与Paimon的集成增强、StarRocks的应用以及Paimon全面替换Hive的计划。
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
|
2月前
|
SQL 存储 分布式计算
Apache Doris 2.1.8 版本正式发布
该版本持续在湖仓一体、异步物化视图、查询优化器与执行引擎、存储管理等方面进行改进提升与问题修复,进一步加强系统的性能和稳定性,欢迎大家下载体验。
|
2月前
|
SQL 存储 Apache
基于 Flink 进行增量批计算的探索与实践
本文整理自阿里云高级技术专家、Apache Flink PMC朱翥老师在Flink Forward Asia 2024的分享,内容分为三部分:背景介绍、工作介绍和总结展望。首先介绍了增量计算的定义及其与批计算、流计算的区别,阐述了增量计算的优势及典型需求场景,并解释了为何选择Flink进行增量计算。其次,详细描述了当前的工作进展,包括增量计算流程、执行计划生成、控制消费数据量级及执行进度记录恢复等关键技术点。最后,展示了增量计算的简单示例、性能测评结果,并对未来工作进行了规划。
539 6
基于 Flink 进行增量批计算的探索与实践
|
3月前
|
消息中间件 JSON 数据库
探索Flink动态CEP:杭州银行的实战案例
本文由杭州银行大数据工程师唐占峰、欧阳武林撰写,介绍Flink动态CEP的定义、应用场景、技术实现及使用方式。Flink动态CEP是基于Flink的复杂事件处理库,支持在不重启服务的情况下动态更新规则,适应快速变化的业务需求。文章详细阐述了其在反洗钱、反欺诈和实时营销等金融领域的应用,并展示了某金融机构的实际应用案例。通过动态CEP,用户可以实时调整规则,提高系统的灵活性和响应速度,降低维护成本。文中还提供了具体的代码示例和技术细节,帮助读者理解和使用Flink动态CEP。
577 2
探索Flink动态CEP:杭州银行的实战案例
|
2月前
|
消息中间件 关系型数据库 MySQL
Flink CDC 在阿里云实时计算Flink版的云上实践
本文整理自阿里云高级开发工程师阮航在Flink Forward Asia 2024的分享,重点介绍了Flink CDC与实时计算Flink的集成、CDC YAML的核心功能及应用场景。主要内容包括:Flink CDC的发展及其在流批数据处理中的作用;CDC YAML支持的同步链路、Transform和Route功能、丰富的监控指标;典型应用场景如整库同步、Binlog原始数据同步、分库分表同步等;并通过两个Demo展示了MySQL整库同步到Paimon和Binlog同步到Kafka的过程。最后,介绍了未来规划,如脏数据处理、数据限流及扩展数据源支持。
213 0
Flink CDC 在阿里云实时计算Flink版的云上实践
|
3月前
|
SQL 存储 Apache
Apache Doris 3.0.3 版本正式发布
亲爱的社区小伙伴们,Apache Doris 3.0.3 版本已于 2024 年 12 月 02 日正式发布。该版本进一步提升了系统的性能及稳定性,欢迎大家下载体验。
|
4月前
|
Dubbo 安全 应用服务中间件
Apache Dubbo 正式发布 HTTP/3 版本 RPC 协议,弱网效率提升 6 倍
在 Apache Dubbo 3.3.0 版本之后,官方推出了全新升级的 Triple X 协议,全面支持 HTTP/1、HTTP/2 和 HTTP/3 协议。本文将围绕 Triple 协议对 HTTP/3 的支持进行详细阐述,包括其设计目标、实际应用案例、性能测试结果以及源码架构分析等内容。
286 10
|
3月前
|
流计算 开发者
【开发者评测】实时计算Flink场景实践和核心功能体验测评获奖名单公布!
【开发者评测】实时计算Flink场景实践和核心功能体验测评获奖名单公布!
119 1

相关产品

  • 实时计算 Flink版
  • 推荐镜像

    更多