Apache Flink Meetup 8.7 深圳站,企业实践 + 1.14 版本预热

本文涉及的产品
实时计算 Flink 版,5000CU*H 3个月
简介: 深圳,好久不见~ 8 月 7 日 Apache Flink Meetup,同学们快来报名~

时隔 10 个月,Apache Flink Meetup 又来到了深圳这个与 Flink 契合度很高的城市。正如改革和创新是深圳的标签,Apache Flink 给技术开发者们带来的,也是摒弃旧的 “批处理” 思维,迎接新的 “流批一体” 趋势。那么本次的 Meetup 将会在深圳这座充满希望的城市给同学们带来哪些内容呢?


Apache Flink 社区 Meetup,深圳好久不见~


8月7日 | 深圳 | 线下


企业实践 + 1.14 新特性预览


本场 Meetup 邀请了来自腾讯、第四范式、阿里巴巴的 4 位资深行业技术专家,将分享 Flink 如何帮助腾讯搭建万亿级实时数据入湖利器 Auto Optimizer Service,以及开发智能化的故障诊断和配置监控工具;又如何帮助第四范式建立 OpenMLDB 数据库实时更新系统。除了企业实践的分享外Flink 1.14 版本的新特性预览也将会在本场 Meetup 中带给大家


■ 活动亮点


  • 超多实用干货,企业如何借助 Flink 的高实时,低延迟解决万亿级实时数据入湖、智能诊断与监控的问题?另外,Flink 1.14 版本又会带来哪些值得期待的功能特性与体验优化?
  • 活动形式多样化,线下线上同步开启,同城可参与线下 Meetup 面对面交流,异地也可在线观看直播,精彩内容不错过!
  • 丰富周边等你拿,报名参加就有机会获得超多 Flink 社区定制的精美周边!如最新专刊 & 马克杯~



■ 活动议程

36EC1FE9-E8AF-48D7-966A-223BD78705DA.pngimage.gif


▼ 立即报名

https://huodongxing.com/event/4607482627500

image.gif

嘉宾及议题介绍


《Flink 实时作业的智能诊断和配置》

F702C81F-B559-4E42-9680-DF7C090BE8DD.pngimage.gif

施晓罡

腾讯大数据计算平台负责人


【嘉宾简介】


目前担任腾讯大数据计算平台负责人。2016 年毕业于北京大学,获得博士学位。Apache Flink 项目 Committer。在 SIGMOD, TODS 和 IPDPS 等国际顶级会议和期刊上发表过多篇论文,并担任 KDD,DASFAA 等国际会议程序委员会委员。在大数据、查询优化和分布式计算等领域有着丰富的工作经验。


【演讲简介】


腾讯内部统一的实时计算平台,支持了视频号、腾讯广告和财付通在内的许多业务,每天处理的数据超过了 65 万亿。相比于传统的离线大数据作业,实时作业需要 7x24 小时不间断运行并保证以较低的延迟处理海量动态变化的数据,因此给开发和运维带来了非常大的挑战。为了降低用户的开发门槛和运维难度,我们开发了智能化的故障诊断和配置监控工具,帮助用户及时定位问题,合理配置作业资源和并行度,并实时监控作业运行状态。


《万亿级实时数据入湖利器 - Auto Optimizer Service》

image.gifFDAB6E8F-4068-4B1A-A1DD-80216FE87C59.png

徐前进

Apache Calcite Committer

腾讯数据湖研发高级工程师



【嘉宾简介】


多年大数据工作经验,开源大数据组件 Flink、 Iceberg、Pulsar 等贡献者,Apache Calcite Committer。


【演讲简介】


本次分享核心讲解万亿级实时数据入湖利器 Auto Optimizer Service 的背景、原理及实现。本次分享主要围绕以下四个方面:

一、背景及痛点
二、架构与用例场景
三、设计原理与实现
四、未来的发展与思考


《基于 Flink 的 OpenMLDB 数据库实时更新系统》

A137DFF4-E2A6-497C-B9C6-1FBD443B2BFF.png

陈迪豪

OpenMLDB 开源项目 PMC

第四范式平台架构师



【嘉宾简介】


陈迪豪,第四范式平台架构师,OpenMLDB 开源项目 PMC。目前就职第四范式,曾担任小米云深度学习平台架构师以及优思德云计算公司存储和容器团队负责人。活跃于分布式系统、机器学习相关的开源社区,是 HBase、OpenStack、TensorFlow、TVM 等开源项目贡献者。通过了 AWS Solution Architect 认证,并在 Austin OpenStack Summit、CPP Summit、Strata Hadoop Conference、ML Summit、ECUG、GIAC、BDTC 等国内外会议上做过技术分享。


【演讲简介】


OpenMLDB 是一个面向机器学习应用提供正确、高效数据供给的开源数据库。基于 Flink 流式计算框架,实现了高性能的 AI 数据实时更新系统,无论是离线的样本数仓还是在线的预估服务,只需一次数据引入就可以满足模型训练数据更新以及在线数据回流等 AI 落地需求。


《Flink 1.14 新特性预览》

81D77624-4904-404E-AABA-3BFE9B11CC9F.png

宋辛童(五藏)

Apache Flink PMC Member & Committer

阿里巴巴技术专家


【嘉宾简介】


Apache Flink PMC Member & Committer,阿里巴巴技术专家,北京大学博士。目前就职于阿里云开源大数据团队,主要负责 Flink 分布式运行时、资源管理、部署等模块的研发工作,同时也是 Flink 1.14 的 Release Manager。


【演讲简介】


Flink 1.14 发布在即,新版本将为大家带来哪些值得期待的功能特性与体验优化呢?本次分享将带你提前了解 Flink 1.14 一些主要的新特性,介绍其应用场景及原理,以及这背后的长期目标与规划。


活动报名


■ 立即报名

https://huodongxing.com/event/4607482627500


■ 活动详情

相关实践学习
基于Hologres轻松玩转一站式实时仓库
本场景介绍如何利用阿里云MaxCompute、实时计算Flink和交互式分析服务Hologres开发离线、实时数据融合分析的数据大屏应用。
Linux入门到精通
本套课程是从入门开始的Linux学习课程,适合初学者阅读。由浅入深案例丰富,通俗易懂。主要涉及基础的系统操作以及工作中常用的各种服务软件的应用、部署和优化。即使是零基础的学员,只要能够坚持把所有章节都学完,也一定会受益匪浅。
相关文章
|
4天前
|
存储 监控 安全
360 企业安全浏览器基于阿里云数据库 SelectDB 版内核 Apache Doris 的数据架构升级实践
为了提供更好的日志数据服务,360 企业安全浏览器设计了统一运维管理平台,并引入 Apache Doris 替代了 Elasticsearch,实现日志检索与报表分析架构的统一,同时依赖 Doris 优异性能,聚合分析效率呈数量级提升、存储成本下降 60%....为日志数据的可视化和价值发挥提供了坚实的基础。
360 企业安全浏览器基于阿里云数据库 SelectDB 版内核 Apache Doris 的数据架构升级实践
|
9天前
|
消息中间件 Kafka Apache
Apache Flink 是一个开源的分布式流处理框架
Apache Flink 是一个开源的分布式流处理框架
133 5
|
2月前
|
SQL 流计算
Flink CDC 1.12版本引入了对SQL Server的支持
【1月更文挑战第26天】【1月更文挑战第124篇】Flink CDC 1.12版本引入了对SQL Server的支持
24 1
|
2月前
|
SQL JSON 关系型数据库
Flink CDC实践(二)
Flink CDC实践(二)
|
4天前
|
存储 运维 监控
飞书深诺基于Flink+Hudi+Hologres的实时数据湖建设实践
通过对各个业务线实时需求的调研了解到,当前实时数据处理场景是各个业务线基于Java服务独自处理的。各个业务线实时能力不能复用且存在计算资源的扩展性问题,而且实时处理的时效已不能满足业务需求。鉴于当前大数据团队数据架构主要解决离线场景,无法承接更多实时业务,因此我们需要重新设计整合,从架构合理性,复用性以及开发运维成本出发,建设一套通用的大数据实时数仓链路。本次实时数仓建设将以游戏运营业务为典型场景进行方案设计,综合业务时效性、资源成本和数仓开发运维成本等考虑,我们最终决定基于Flink + Hudi + Hologres来构建阿里云云原生实时湖仓,并在此文中探讨实时数据架构的具体落地实践。
飞书深诺基于Flink+Hudi+Hologres的实时数据湖建设实践
|
10天前
|
Java Linux 流计算
【极数系列】Flink环境搭建&Docker版本(04)
【极数系列】Flink环境搭建&Docker版本(04)
18 3
|
10天前
|
Java Linux 网络安全
【极数系列】Flink环境搭建&Linux版本 (03)
【极数系列】Flink环境搭建&Linux版本 (03)
34 2
|
23天前
|
存储 缓存 数据处理
Flink 2.0 状态存算分离改造实践
本文整理自阿里云智能 Flink 存储引擎团队兰兆千在 FFA 2023 核心技术(一)中 的分享,内容关于 Flink 2.0 状态存算分离改造实践的研究。
373 0
Flink 2.0 状态存算分离改造实践
|
26天前
|
SQL 并行计算 大数据
【大数据技术攻关专题】「Apache-Flink零基础入门」手把手+零基础带你玩转大数据流式处理引擎Flink(基础加强+运行原理)
关于Flink服务的搭建与部署,由于其涉及诸多实战操作而理论部分相对较少,小编打算采用一个独立的版本和环境来进行详尽的实战讲解。考虑到文字描述可能无法充分展现操作的细节和流程,我们决定以视频的形式进行分析和介绍。因此,在本文中,我们将暂时不涉及具体的搭建和部署步骤。
303 3
【大数据技术攻关专题】「Apache-Flink零基础入门」手把手+零基础带你玩转大数据流式处理引擎Flink(基础加强+运行原理)
|
2月前
|
存储 数据库连接 Apache
Apache Doris 2.0.4 版本正式发布
亲爱的社区小伙伴们,[Apache Doris 2.0.4 ](https://doris.apache.org/download/) 版本已于 2024 年 1 月 26 日正式发布,该版本在新优化器、倒排索引、数据湖等功能上有了进一步的完善与更新,使 Apache Doris 能够适配更广泛的场景。此外,该版本进行了若干的改进与优化,以提供更加稳定高效的性能体验。新版本已经上线,欢迎大家下载使用!

相关产品

  • 实时计算 Flink版
  • 推荐镜像

    更多