必看!Apache Flink 运维&实战系列直播,揭秘生产环境技术难点

简介: 随着 Flink 社区的快速发展,其技术也逐渐走向成熟。在 2019 年,国内已经有大量的本土互联网公司开始采用 Apache Flink 作为主流的实时计算解决方案。同时,在全球范围内,优步、网飞、微软和亚马逊等国际互联网公司也逐渐开始使用 Apache Flink。

Apache Flink 是公认的新一代开源大数据计算引擎,其流水线运行系统既可以执行批处理程序也可以执行流处理程序。目前,Flink 已成为 Apache 基金会和 GitHub 社区最为活跃的项目之一。

随着 Flink 社区的快速发展,其技术也逐渐走向成熟。在 2019 年,国内已经有大量的本土互联网公司开始采用 Apache Flink 作为主流的实时计算解决方案。同时,在全球范围内,优步、网飞、微软和亚马逊等国际互联网公司也逐渐开始使用 Apache Flink。

为了让大家更方便上手使用 Flink,Flink 中文社区邀请 Apache Flink 核心贡献者与国内外一线大厂线上直播分享 Flink 技术原理解析、应用上手实操、最佳实践应用等,揭秘 Flink 从基础、进阶到运维&实战等详细细节,助力社区开发者从小白成长为技术专家!

直播观看方式:

钉钉扫描下方二维码或搜索:23138101,即可加入Apache Flink社区大群,每周二或周四锁定群直播!

_

3.1 Flink 反压/延时监控和调参控制

【分享嘉宾】Rong Rong(Apache Flink Committer,Software Engineer at Uber)
视频回放

3.2 Metric 指标、监控、报警

【分享嘉宾】孙梦瑶(美团点评 研发工程师)
视频回放

3.3 如何利用 Flink 和深度学习模型实现垃圾图片分类

【分享嘉宾】陈戊超(阿里巴巴 技术专家)
视频回放

3.4 Flink CEP 实战

【分享嘉宾】刘博(哈啰出行 大数据实时平台资深开发)
视频回放
文章整理

3.5 Flink 实时数仓的应用

【分享嘉宾】黄伟伦(美团点评 数据系统研发工程师)
视频回放

3.6 State Processor API 介绍与演示

【分享嘉宾】戴资力(Apache Flink PMC)
视频回放

3.7 Flink 常见问题诊断

【分享嘉宾】杨阳(阿里巴巴 高级运维工程师)
视频回放

3.8 大规模场景的高阶运维

【分享嘉宾】王华(阿里巴巴 运维专家)
视频回放

3.9 Flink 作业问题分析和调优实践

【分享嘉宾】李康(虎牙 实时平台负责人)
视频回放

3.10 Flink 生产配置最佳实践

【分享嘉宾】席建刚(趣头条 实时平台负责人)
视频回放

3.11 基于 Apache Flink 的监控告警系统

【分享嘉宾】zhisheng(《Flink 实战与性能优化》专栏作者)
视频回放

3.12 30分钟教你如何入门 – Apache Flink 最全知识图谱详解

【分享嘉宾】程鹤群(军长)(Apache Flink Committer,阿里巴巴技术专家)
视频回放

3.13 【1.10特别篇】Demo: 基于 Flink SQL 构建离线应用

【分享嘉宾】李劲松(之信)(Apache Flink Committer,阿里巴巴技术专家)
视频回放

3.14 【1.10特别篇】Demo: 基于 Flink SQL 构建实时应用

【分享嘉宾】伍翀(云邪)(Apache Flink PMC,阿里巴巴技术专家)
视频回放

3.15 【1.10特别篇】Flink on Zeppelin: 极致体验(1) 入门 + Batch

【分享嘉宾】章剑锋(Apache Zeppelin PMC,阿里巴巴高级技术专家)
视频回放

3.16 【实时数仓篇】基于 Flink 的典型 ETL 场景实现

【分享嘉宾】买蓉(美团点评 高级技术专家)
视频回放

3.17 【1.10特别篇】Flink on Zeppelin: 极致体验(2) Streaming + 高级用法

【分享嘉宾】章剑锋(Apache Zeppelin PMC,阿里巴巴高级技术专家)
视频回放

3.18 【1.10特别篇】Alink 入门到实践

【分享嘉宾】杨旭(阿里巴巴资深算法专家)
直播:3月5日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.19 【实时数仓篇】利用 Flink 实现实时超时统计场景

【分享嘉宾】马汶园(菜鸟 数据工程师)
直播:3月10日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.20 【实时数仓篇】利用 Flink 实现实时状态复用场景

【分享嘉宾】李晨(菜鸟 数据工程师)
直播:3月12日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.21 【1.10特别篇】PyFlink 架构、应用案例及未来规划

【分享嘉宾】孙金城(Apache Flink PMC,Apache Beam Committer,阿里巴巴高级技术专家)
直播:3月17日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.22 【实时数仓篇】Flink CEP 及 应用场景

【分享嘉宾】薛康(滴滴 资深研发工程师)
直播:3月19日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.23 【实时数仓篇】Flink 窗口函数的应用场景

【分享嘉宾】张俊(Apache Flink Contributor,OPPO大数据平台研发负责人)
直播:3月26日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.24 【1.10特别篇】细粒度资源管理

【分享嘉宾】宋辛童(Apache Flink Contributor,阿里巴巴高级开发工程师)
直播:3月31日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.25 【1.10特别篇】native on Kubernetes

【分享嘉宾】王阳(阿里巴巴实时计算引擎团队研发专家)
直播:4月2日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.26 【直播主题】PyFlink 最新功能介绍

【分享嘉宾】程鹤群(军长)(Apache Flink Committer,阿里巴巴技术专家)
直播:4月16日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

相关实践学习
基于Hologres+Flink搭建GitHub实时数据大屏
通过使用Flink、Hologres构建实时数仓,并通过Hologres对接BI分析工具(以DataV为例),实现海量数据实时分析.
实时计算 Flink 实战课程
如何使用实时计算 Flink 搞定数据处理难题?实时计算 Flink 极客训练营产品、技术专家齐上阵,从开源 Flink功能介绍到实时计算 Flink 优势详解,现场实操,5天即可上手! 欢迎开通实时计算 Flink 版: https://cn.aliyun.com/product/bigdata/sc Flink Forward Asia 介绍: Flink Forward 是由 Apache 官方授权,Apache Flink Community China 支持的会议,通过参会不仅可以了解到 Flink 社区的最新动态和发展计划,还可以了解到国内外一线大厂围绕 Flink 生态的生产实践经验,是 Flink 开发者和使用者不可错过的盛会。 去年经过品牌升级后的 Flink Forward Asia 吸引了超过2000人线下参与,一举成为国内最大的 Apache 顶级项目会议。结合2020年的特殊情况,Flink Forward Asia 2020 将在12月26日以线上峰会的形式与大家见面。
相关文章
|
12月前
|
消息中间件 运维 Kafka
直播预告|Kafka+Flink双引擎实战:手把手带你搭建分布式实时分析平台!
在数字化转型中,企业亟需从海量数据中快速提取价值并转化为业务增长动力。5月15日19:00-21:00,阿里云三位技术专家将讲解Kafka与Flink的强强联合方案,帮助企业零门槛构建分布式实时分析平台。此组合广泛应用于实时风控、用户行为追踪等场景,具备高吞吐、弹性扩缩容及亚秒级响应优势。直播适合初学者、开发者和数据工程师,参与还有机会领取定制好礼!扫描海报二维码或点击链接预约直播:[https://developer.aliyun.com/live/255088](https://developer.aliyun.com/live/255088)
692 35
直播预告|Kafka+Flink双引擎实战:手把手带你搭建分布式实时分析平台!
|
12月前
|
消息中间件 运维 Kafka
直播预告|Kafka+Flink 双引擎实战:手把手带你搭建分布式实时分析平台!
直播预告|Kafka+Flink 双引擎实战:手把手带你搭建分布式实时分析平台!
329 11
|
9月前
|
人工智能 运维 监控
智能运维与数据治理:基于 Apache Doris 的 Data Agent 解决方案
本文基于 Apache Doris 数据运维治理 Agent 展开讨论,如何让 AI 成为 Doris 数据运维工程师和数据治理专家的智能助手,并在某些场景下实现对人工操作的全面替代。这种变革不仅仅是技术层面的进步,更是数据运维治理思维方式的根本性转变:从“被动响应”到“主动预防”,从“人工判断”到“智能决策”,从“孤立处理”到“协同治理”。
1389 11
智能运维与数据治理:基于 Apache Doris 的 Data Agent 解决方案
|
分布式计算 大数据 Apache
ClickHouse与大数据生态集成:Spark & Flink 实战
【10月更文挑战第26天】在当今这个数据爆炸的时代,能够高效地处理和分析海量数据成为了企业和组织提升竞争力的关键。作为一款高性能的列式数据库系统,ClickHouse 在大数据分析领域展现出了卓越的能力。然而,为了充分利用ClickHouse的优势,将其与现有的大数据处理框架(如Apache Spark和Apache Flink)进行集成变得尤为重要。本文将从我个人的角度出发,探讨如何通过这些技术的结合,实现对大规模数据的实时处理和分析。
1173 2
ClickHouse与大数据生态集成:Spark & Flink 实战
|
存储 分布式计算 调度
Flink Shuffle 技术演进之路
本文由阿里云智能Flink团队郭伟杰与哔哩哔哩蒋晓峰在Flink Forward Asia 2024上的分享整理而成,聚焦Flink Shuffle技术的演进与未来规划。内容涵盖低延迟的Pipelined Shuffle、高吞吐的Blocking Shuffle、流批一体的Hybrid Shuffle三大模式及其应用场景,并探讨了Flink与Apache Celeborn的整合、性能优化及长期发展路线图。通过Hybrid Shuffle等创新技术,Flink实现了资源调度灵活性与高性能的平衡,为流批一体化计算提供了强大支持。未来,社区将进一步优化Shuffle机制,提升系统智能化与易用性。
720 14
Flink Shuffle 技术演进之路
|
消息中间件 JSON 数据库
探索Flink动态CEP:杭州银行的实战案例
探索Flink动态CEP:杭州银行的实战案例
704 5
|
消息中间件 JSON 数据库
探索Flink动态CEP:杭州银行的实战案例
本文由杭州银行大数据工程师唐占峰、欧阳武林撰写,介绍Flink动态CEP的定义、应用场景、技术实现及使用方式。Flink动态CEP是基于Flink的复杂事件处理库,支持在不重启服务的情况下动态更新规则,适应快速变化的业务需求。文章详细阐述了其在反洗钱、反欺诈和实时营销等金融领域的应用,并展示了某金融机构的实际应用案例。通过动态CEP,用户可以实时调整规则,提高系统的灵活性和响应速度,降低维护成本。文中还提供了具体的代码示例和技术细节,帮助读者理解和使用Flink动态CEP。
1833 3
探索Flink动态CEP:杭州银行的实战案例
|
存储 运维 监控
实时计算Flink版在稳定性、性能、开发运维、安全能力等等跟其他引擎及自建Flink集群比较。
实时计算Flink版在稳定性、性能、开发运维和安全能力等方面表现出色。其自研的高性能状态存储引擎GeminiStateBackend显著提升了作业稳定性,状态管理优化使性能提升40%以上。核心性能较开源Flink提升2-3倍,资源利用率提高100%。提供一站式开发管理、自动化运维和丰富的监控告警功能,支持多语言开发和智能调优。安全方面,具备访问控制、高可用保障和全链路容错能力,确保企业级应用的安全与稳定。
323 0
|
12月前
|
数据采集 机器学习/深度学习 人工智能
运维人的“福音”?AI 驱动的自动化网络监控到底香不香!
运维人的“福音”?AI 驱动的自动化网络监控到底香不香!
1236 0
|
7月前
|
人工智能 运维 监控
运维安全还能靠“人盯人”?别闹了,聊聊自动化处理的真功夫
运维安全还能靠“人盯人”?别闹了,聊聊自动化处理的真功夫
267 17

相关产品

  • 实时计算 Flink版
  • 推荐镜像

    更多