Apache Flink Meetup 8.7 深圳站改为线上

本文涉及的产品
实时计算 Flink 版,5000CU*H 3个月
简介: Meetup 改为线上!遗憾虽有,福利常在,点击内容了解详情~

很遗憾的通知大家,受疫情的影响,考虑到老师和同学们的安全,原定于深圳的 8 月 7 日 Apache Flink Meetup 没有办法在线下跟大家见面了。


但是!Meetup 并没有取消!线上直播依旧会如期开放!遗憾虽有,福利常在~鉴于此次特殊情况,往常线下的活动本次将转移到线上进行!请关注小松鼠微信。


▼ 扫码添加小松鼠微信

小松鼠微信二维码.png

▼ 直播观看地址


https://developer.aliyun.com/live/247104


Apache Flink 社区 Meetup,线上依旧精彩


8月7日 | 线上


企业实践 + 1.14 新特性预览


本场 Meetup 邀请了来自腾讯、第四范式、阿里巴巴的 4 位资深行业技术专家,将分享 Flink 如何帮助腾讯搭建万亿级实时数据入湖利器 Auto Optimizer Service,以及开发智能化的故障诊断和配置监控工具;又如何帮助第四范式建立 OpenMLDB 数据库实时更新系统。除了企业实践的分享外Flink 1.14 版本的新特性预览也将会在本场 Meetup 中带给大家


■ 活动亮点


  • 超多实用干货,企业如何借助 Flink 的高实时,低延迟解决万亿级实时数据入湖、智能诊断与监控的问题?另外,Flink 1.14 版本又会带来哪些值得期待的功能特性与体验优化?
  • 活动形式多样化,线上直播照常开启,足不出户即可 get 满满的知识干货~
  • 丰富周边等你拿,报名参加就有机会获得超多 Flink 社区定制的精美周边!如最新专刊 & 马克杯~



■ 活动议程

议程.png


▼ 立即报名


https://huodongxing.com/event/4607482627500


஑᩻ग़ Fli

嘉宾及议题介绍


《Flink 实时作业的智能诊断和配置》

image.png

施晓罡

腾讯大数据计算平台负责人


【嘉宾简介】

目前担任腾讯大数据计算平台负责人。2016 年毕业于北京大学,获得博士学位。Apache Flink 项目 Committer。在 SIGMOD, TODS 和 IPDPS 等国际顶级会议和期刊上发表过多篇论文,并担任 KDD,DASFAA 等国际会议程序委员会委员。在大数据、查询优化和分布式计算等领域有着丰富的工作经验。


【演讲简介】


腾讯内部统一的实时计算平台,支持了视频号、腾讯广告和财付通在内的许多业务,每天处理的数据超过了 65 万亿。相比于传统的离线大数据作业,实时作业需要 7x24 小时不间断运行并保证以较低的延迟处理海量动态变化的数据,因此给开发和运维带来了非常大的挑战。为了降低用户的开发门槛和运维难度,我们开发了智能化的故障诊断和配置监控工具,帮助用户及时定位问题,合理配置作业资源和并行度,并实时监控作业运行状态。


《万亿级实时数据入湖利器 - Auto Optimizer Service》

image.png

徐前进

Apache Calcite Committer

腾讯数据湖研发高级工程师



【嘉宾简介】


多年大数据工作经验,开源大数据组件 Flink、 Iceberg、Pulsar 等贡献者,Apache Calcite Committer。


【演讲简介】


本次分享核心讲解万亿级实时数据入湖利器 Auto Optimizer Service 的背景、原理及实现。本次分享主要围绕以下四个方面:

一、背景及痛点
二、架构与用例场景
三、设计原理与实现
四、未来的发展与思考


《基于 Flink 的 OpenMLDB 数据库实时更新系统》

image.gifimage.png

陈迪豪

OpenMLDB 开源项目 PMC

第四范式平台架构师



【嘉宾简介】


陈迪豪,第四范式平台架构师,OpenMLDB 开源项目 PMC。目前就职第四范式,曾担任小米云深度学习平台架构师以及优思德云计算公司存储和容器团队负责人。活跃于分布式系统、机器学习相关的开源社区,是 HBase、OpenStack、TensorFlow、TVM 等开源项目贡献者。通过了 AWS Solution Architect 认证,并在 Austin OpenStack Summit、CPP Summit、Strata Hadoop Conference、ML Summit、ECUG、GIAC、BDTC 等国内外会议上做过技术分享。


【演讲简介】


OpenMLDB 是一个面向机器学习应用提供正确、高效数据供给的开源数据库。基于 Flink 流式计算框架,实现了高性能的 AI 数据实时更新系统,无论是离线的样本数仓还是在线的预估服务,只需一次数据引入就可以满足模型训练数据更新以及在线数据回流等 AI 落地需求。


《Flink 1.14 新特性预览》

image.png

宋辛童(五藏)

Apache Flink PMC Member & Committer

阿里巴巴技术专家


【嘉宾简介】


Apache Flink PMC Member & Committer,阿里巴巴技术专家,北京大学博士。目前就职于阿里云开源大数据团队,主要负责 Flink 分布式运行时、资源管理、部署等模块的研发工作,同时也是 Flink 1.14 的 Release Manager。


【演讲简介】


Flink 1.14 发布在即,新版本将为大家带来哪些值得期待的功能特性与体验优化呢?本次分享将带你提前了解 Flink 1.14 一些主要的新特性,介绍其应用场景及原理,以及这背后的长期目标与规划。


活动报名


■ 活动详情




更多 Flink 相关技术问题,可扫码加入社区钉钉交流群

第一时间获取最新技术文章和社区动态,请关注公众号~


image.png


活动推荐


阿里云基于 Apache Flink 构建的企业级产品-实时计算Flink版现开启活动:

99元试用 实时计算Flink版(包年包月、10CU)即有机会获得 Flink 独家定制T恤;另包3个月及以上还有85折优惠!

了解活动详情:https://www.aliyun.com/product/bigdata/sc

image.png

相关实践学习
基于Hologres轻松玩转一站式实时仓库
本场景介绍如何利用阿里云MaxCompute、实时计算Flink和交互式分析服务Hologres开发离线、实时数据融合分析的数据大屏应用。
Linux入门到精通
本套课程是从入门开始的Linux学习课程,适合初学者阅读。由浅入深案例丰富,通俗易懂。主要涉及基础的系统操作以及工作中常用的各种服务软件的应用、部署和优化。即使是零基础的学员,只要能够坚持把所有章节都学完,也一定会受益匪浅。
相关文章
|
27天前
|
存储 人工智能 大数据
The Past, Present and Future of Apache Flink
本文整理自阿里云开源大数据负责人王峰(莫问)在 Flink Forward Asia 2024 上海站主论坛开场的分享,今年正值 Flink 开源项目诞生的第 10 周年,借此时机,王峰回顾了 Flink 在过去 10 年的发展历程以及 Flink社区当前最新的技术成果,最后展望下一个十年 Flink 路向何方。
315 33
The Past, Present and Future of Apache Flink
|
3月前
|
SQL Java API
Apache Flink 2.0-preview released
Apache Flink 社区正积极筹备 Flink 2.0 的发布,这是自 Flink 1.0 发布以来的首个重大更新。Flink 2.0 将引入多项激动人心的功能和改进,包括存算分离状态管理、物化表、批作业自适应执行等,同时也包含了一些不兼容的变更。目前提供的预览版旨在让用户提前尝试新功能并收集反馈,但不建议在生产环境中使用。
904 13
Apache Flink 2.0-preview released
|
3月前
|
存储 缓存 算法
分布式锁服务深度解析:以Apache Flink的Checkpointing机制为例
【10月更文挑战第7天】在分布式系统中,多个进程或节点可能需要同时访问和操作共享资源。为了确保数据的一致性和系统的稳定性,我们需要一种机制来协调这些进程或节点的访问,避免并发冲突和竞态条件。分布式锁服务正是为此而生的一种解决方案。它通过在网络环境中实现锁机制,确保同一时间只有一个进程或节点能够访问和操作共享资源。
119 3
|
2月前
|
分布式计算 大数据 Apache
Apache Spark & Paimon Meetup · 北京站,助力 LakeHouse 架构生产落地
2024年11月15日13:30北京市朝阳区阿里中心-望京A座-05F,阿里云 EMR 技术团队联合 Apache Paimon 社区举办 Apache Spark & Paimon meetup,助力企业 LakeHouse 架构生产落地”线下 meetup,欢迎报名参加!
113 3
|
3月前
|
存储 小程序 Apache
10月26日@杭州,飞轮科技 x 阿里云举办 Apache Doris Meetup,探索保险、游戏、制造及电信领域数据仓库建设实践
10月26日,由飞轮科技与阿里云联手发起的 Apache Doris 杭州站 Meetup 即将开启!
78 0
|
4月前
|
运维 数据处理 数据安全/隐私保护
阿里云实时计算Flink版测评报告
该测评报告详细介绍了阿里云实时计算Flink版在用户行为分析与标签画像中的应用实践,展示了其毫秒级的数据处理能力和高效的开发流程。报告还全面评测了该服务在稳定性、性能、开发运维及安全性方面的卓越表现,并对比自建Flink集群的优势。最后,报告评估了其成本效益,强调了其灵活扩展性和高投资回报率,适合各类实时数据处理需求。
|
2月前
|
存储 分布式计算 流计算
实时计算 Flash – 兼容 Flink 的新一代向量化流计算引擎
本文介绍了阿里云开源大数据团队在实时计算领域的最新成果——向量化流计算引擎Flash。文章主要内容包括:Apache Flink 成为业界流计算标准、Flash 核心技术解读、性能测试数据以及在阿里巴巴集团的落地效果。Flash 是一款完全兼容 Apache Flink 的新一代流计算引擎,通过向量化技术和 C++ 实现,大幅提升了性能和成本效益。
1439 73
实时计算 Flash – 兼容 Flink 的新一代向量化流计算引擎
zdl
|
2月前
|
消息中间件 运维 大数据
大数据实时计算产品的对比测评:实时计算Flink版 VS 自建Flink集群
本文介绍了实时计算Flink版与自建Flink集群的对比,涵盖部署成本、性能表现、易用性和企业级能力等方面。实时计算Flink版作为全托管服务,显著降低了运维成本,提供了强大的集成能力和弹性扩展,特别适合中小型团队和业务波动大的场景。文中还提出了改进建议,并探讨了与其他产品的联动可能性。总结指出,实时计算Flink版在简化运维、降低成本和提升易用性方面表现出色,是大数据实时计算的优选方案。
zdl
174 56
|
9天前
|
存储 关系型数据库 BI
实时计算UniFlow:Flink+Paimon构建流批一体实时湖仓
实时计算架构中,传统湖仓架构在数据流量管控和应用场景支持上表现良好,但在实际运营中常忽略细节,导致新问题。为解决这些问题,提出了流批一体的实时计算湖仓架构——UniFlow。该架构通过统一的流批计算引擎、存储格式(如Paimon)和Flink CDC工具,简化开发流程,降低成本,并确保数据一致性和实时性。UniFlow还引入了Flink Materialized Table,实现了声明式ETL,优化了调度和执行模式,使用户能灵活调整新鲜度与成本。最终,UniFlow不仅提高了开发和运维效率,还提供了更实时的数据支持,满足业务决策需求。
|
5月前
|
SQL 消息中间件 Kafka
实时计算 Flink版产品使用问题之如何在EMR-Flink的Flink SOL中针对source表单独设置并行度
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStream API、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。

相关产品

  • 实时计算 Flink版
  • 推荐镜像

    更多