Apache Flink Meetup 8.7 深圳站,企业实践 + 1.14 版本预热

本文涉及的产品
实时计算 Flink 版,5000CU*H 3个月
简介: 深圳,好久不见~ 8 月 7 日 Apache Flink Meetup,同学们快来报名~

时隔 10 个月,Apache Flink Meetup 又来到了深圳这个与 Flink 契合度很高的城市。正如改革和创新是深圳的标签,Apache Flink 给技术开发者们带来的,也是摒弃旧的 “批处理” 思维,迎接新的 “流批一体” 趋势。那么本次的 Meetup 将会在深圳这座充满希望的城市给同学们带来哪些内容呢?


Apache Flink 社区 Meetup,深圳好久不见~


8月7日 | 深圳 | 线下


企业实践 + 1.14 新特性预览


本场 Meetup 邀请了来自腾讯、第四范式、阿里巴巴的 4 位资深行业技术专家,将分享 Flink 如何帮助腾讯搭建万亿级实时数据入湖利器 Auto Optimizer Service,以及开发智能化的故障诊断和配置监控工具;又如何帮助第四范式建立 OpenMLDB 数据库实时更新系统。除了企业实践的分享外Flink 1.14 版本的新特性预览也将会在本场 Meetup 中带给大家


■ 活动亮点


  • 超多实用干货,企业如何借助 Flink 的高实时,低延迟解决万亿级实时数据入湖、智能诊断与监控的问题?另外,Flink 1.14 版本又会带来哪些值得期待的功能特性与体验优化?
  • 活动形式多样化,线下线上同步开启,同城可参与线下 Meetup 面对面交流,异地也可在线观看直播,精彩内容不错过!
  • 丰富周边等你拿,报名参加就有机会获得超多 Flink 社区定制的精美周边!如最新专刊 & 马克杯~



■ 活动议程

36EC1FE9-E8AF-48D7-966A-223BD78705DA.pngimage.gif


▼ 立即报名

https://huodongxing.com/event/4607482627500

image.gif

嘉宾及议题介绍


《Flink 实时作业的智能诊断和配置》

F702C81F-B559-4E42-9680-DF7C090BE8DD.pngimage.gif

施晓罡

腾讯大数据计算平台负责人


【嘉宾简介】


目前担任腾讯大数据计算平台负责人。2016 年毕业于北京大学,获得博士学位。Apache Flink 项目 Committer。在 SIGMOD, TODS 和 IPDPS 等国际顶级会议和期刊上发表过多篇论文,并担任 KDD,DASFAA 等国际会议程序委员会委员。在大数据、查询优化和分布式计算等领域有着丰富的工作经验。


【演讲简介】


腾讯内部统一的实时计算平台,支持了视频号、腾讯广告和财付通在内的许多业务,每天处理的数据超过了 65 万亿。相比于传统的离线大数据作业,实时作业需要 7x24 小时不间断运行并保证以较低的延迟处理海量动态变化的数据,因此给开发和运维带来了非常大的挑战。为了降低用户的开发门槛和运维难度,我们开发了智能化的故障诊断和配置监控工具,帮助用户及时定位问题,合理配置作业资源和并行度,并实时监控作业运行状态。


《万亿级实时数据入湖利器 - Auto Optimizer Service》

image.gifFDAB6E8F-4068-4B1A-A1DD-80216FE87C59.png

徐前进

Apache Calcite Committer

腾讯数据湖研发高级工程师



【嘉宾简介】


多年大数据工作经验,开源大数据组件 Flink、 Iceberg、Pulsar 等贡献者,Apache Calcite Committer。


【演讲简介】


本次分享核心讲解万亿级实时数据入湖利器 Auto Optimizer Service 的背景、原理及实现。本次分享主要围绕以下四个方面:

一、背景及痛点
二、架构与用例场景
三、设计原理与实现
四、未来的发展与思考


《基于 Flink 的 OpenMLDB 数据库实时更新系统》

A137DFF4-E2A6-497C-B9C6-1FBD443B2BFF.png

陈迪豪

OpenMLDB 开源项目 PMC

第四范式平台架构师



【嘉宾简介】


陈迪豪,第四范式平台架构师,OpenMLDB 开源项目 PMC。目前就职第四范式,曾担任小米云深度学习平台架构师以及优思德云计算公司存储和容器团队负责人。活跃于分布式系统、机器学习相关的开源社区,是 HBase、OpenStack、TensorFlow、TVM 等开源项目贡献者。通过了 AWS Solution Architect 认证,并在 Austin OpenStack Summit、CPP Summit、Strata Hadoop Conference、ML Summit、ECUG、GIAC、BDTC 等国内外会议上做过技术分享。


【演讲简介】


OpenMLDB 是一个面向机器学习应用提供正确、高效数据供给的开源数据库。基于 Flink 流式计算框架,实现了高性能的 AI 数据实时更新系统,无论是离线的样本数仓还是在线的预估服务,只需一次数据引入就可以满足模型训练数据更新以及在线数据回流等 AI 落地需求。


《Flink 1.14 新特性预览》

81D77624-4904-404E-AABA-3BFE9B11CC9F.png

宋辛童(五藏)

Apache Flink PMC Member & Committer

阿里巴巴技术专家


【嘉宾简介】


Apache Flink PMC Member & Committer,阿里巴巴技术专家,北京大学博士。目前就职于阿里云开源大数据团队,主要负责 Flink 分布式运行时、资源管理、部署等模块的研发工作,同时也是 Flink 1.14 的 Release Manager。


【演讲简介】


Flink 1.14 发布在即,新版本将为大家带来哪些值得期待的功能特性与体验优化呢?本次分享将带你提前了解 Flink 1.14 一些主要的新特性,介绍其应用场景及原理,以及这背后的长期目标与规划。


活动报名


■ 立即报名

https://huodongxing.com/event/4607482627500


■ 活动详情

相关实践学习
基于Hologres轻松玩转一站式实时仓库
本场景介绍如何利用阿里云MaxCompute、实时计算Flink和交互式分析服务Hologres开发离线、实时数据融合分析的数据大屏应用。
Linux入门到精通
本套课程是从入门开始的Linux学习课程,适合初学者阅读。由浅入深案例丰富,通俗易懂。主要涉及基础的系统操作以及工作中常用的各种服务软件的应用、部署和优化。即使是零基础的学员,只要能够坚持把所有章节都学完,也一定会受益匪浅。
相关文章
|
24天前
|
SQL 消息中间件 关系型数据库
Apache Doris Flink Connector 24.0.0 版本正式发布
该版本新增了对 Flink 1.20 的支持,并支持通过 Arrow Flight SQL 高速读取 Doris 中数据。
|
16天前
|
消息中间件 资源调度 API
Apache Flink 流批融合技术介绍
本文源自阿里云高级研发工程师周云峰在Apache Asia Community OverCode 2024的分享,内容涵盖从“流批一体”到“流批融合”的演进、技术解决方案及社区进展。流批一体已在API、算子和引擎层面实现统一,但用户仍需手动配置作业模式。流批融合旨在通过动态调整优化策略,自动适应不同场景需求。文章详细介绍了如何通过量化指标(如isProcessingBacklog和isInsertOnly)实现这一目标,并展示了针对不同场景的具体优化措施。此外,还概述了社区当前进展及未来规划,包括将优化方案推向Flink社区、动态调整算子流程结构等。
279 31
Apache Flink 流批融合技术介绍
|
15天前
|
SQL 存储 缓存
Apache Doris 2.1.6 版本正式发布
2.1.6 版本在 Lakehouse、异步物化视图、半结构化数据管理持续升级改进,同时在查询优化器、执行引擎、存储管理、数据导入与导出以及权限管理等方面完成了若干修复
|
2月前
|
Java 微服务 Spring
驾驭复杂性:Spring Cloud在微服务构建中的决胜法则
【8月更文挑战第31天】Spring Cloud是在Spring Framework基础上打造的微服务解决方案,提供服务发现、配置管理、消息路由等功能,适用于构建复杂的微服务架构。本文介绍如何利用Spring Cloud搭建微服务,包括Eureka服务发现、Config Server配置管理和Zuul API网关等组件的配置与使用。通过Spring Cloud,可实现快速开发、自动化配置,并提升系统的伸缩性和容错性,尽管仍需面对分布式事务等挑战,但其强大的社区支持有助于解决问题。
42 0
|
11天前
|
运维 数据处理 数据安全/隐私保护
阿里云实时计算Flink版测评报告
该测评报告详细介绍了阿里云实时计算Flink版在用户行为分析与标签画像中的应用实践,展示了其毫秒级的数据处理能力和高效的开发流程。报告还全面评测了该服务在稳定性、性能、开发运维及安全性方面的卓越表现,并对比自建Flink集群的优势。最后,报告评估了其成本效益,强调了其灵活扩展性和高投资回报率,适合各类实时数据处理需求。
|
3月前
|
存储 监控 大数据
阿里云实时计算Flink在多行业的应用和实践
本文整理自 Flink Forward Asia 2023 中闭门会的分享。主要分享实时计算在各行业的应用实践,对回归实时计算的重点场景进行介绍以及企业如何使用实时计算技术,并且提供一些在技术架构上的参考建议。
731 7
阿里云实时计算Flink在多行业的应用和实践
|
2月前
|
SQL 消息中间件 Kafka
实时计算 Flink版产品使用问题之如何在EMR-Flink的Flink SOL中针对source表单独设置并行度
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStream API、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
|
12天前
|
存储 运维 监控
阿里云实时计算Flink版的评测
阿里云实时计算Flink版的评测
43 15
|
11天前
|
运维 分布式计算 监控
评测报告:阿里云实时计算Flink版
本评测主要针对阿里云实时计算Flink版在用户行为分析中的应用。作为一名数据分析师,我利用该服务处理了大量日志数据,包括用户点击流和登录行为。Flink的强大实时处理能力让我能够迅速洞察用户行为变化,及时调整营销策略。此外,其卓越的性能和稳定性显著降低了运维负担,提升了项目效率。产品文档详尽且易于理解,但建议增加故障排查示例。
|
10天前
|
机器学习/深度学习 运维 监控
阿里云实时计算Flink版体验评测
阿里云实时计算Flink版提供了完善的产品内引导和丰富文档,使初学者也能快速上手。产品界面引导清晰,内置模板简化了流处理任务。官方文档全面,涵盖配置、开发、调优等内容。此外,该产品在数据开发和运维方面表现优秀,支持灵活的作业开发和自动化运维。未来可增强复杂事件处理、实时可视化展示及机器学习支持,进一步提升用户体验。作为阿里云大数据体系的一部分,它能与DataWorks、MaxCompute等产品无缝联动,构建完整的实时数据处理平台。

相关产品

  • 实时计算 Flink版
  • 推荐镜像

    更多
    下一篇
    无影云桌面