必看!Apache Flink 运维&实战系列直播,揭秘生产环境技术难点

本文涉及的产品
实时计算 Flink 版,5000CU*H 3个月
简介: 随着 Flink 社区的快速发展,其技术也逐渐走向成熟。在 2019 年,国内已经有大量的本土互联网公司开始采用 Apache Flink 作为主流的实时计算解决方案。同时,在全球范围内,优步、网飞、微软和亚马逊等国际互联网公司也逐渐开始使用 Apache Flink。

Apache Flink 是公认的新一代开源大数据计算引擎,其流水线运行系统既可以执行批处理程序也可以执行流处理程序。目前,Flink 已成为 Apache 基金会和 GitHub 社区最为活跃的项目之一。

随着 Flink 社区的快速发展,其技术也逐渐走向成熟。在 2019 年,国内已经有大量的本土互联网公司开始采用 Apache Flink 作为主流的实时计算解决方案。同时,在全球范围内,优步、网飞、微软和亚马逊等国际互联网公司也逐渐开始使用 Apache Flink。

为了让大家更方便上手使用 Flink,Flink 中文社区邀请 Apache Flink 核心贡献者与国内外一线大厂线上直播分享 Flink 技术原理解析、应用上手实操、最佳实践应用等,揭秘 Flink 从基础、进阶到运维&实战等详细细节,助力社区开发者从小白成长为技术专家!

直播观看方式:

钉钉扫描下方二维码或搜索:23138101,即可加入Apache Flink社区大群,每周二或周四锁定群直播!

_

3.1 Flink 反压/延时监控和调参控制

【分享嘉宾】Rong Rong(Apache Flink Committer,Software Engineer at Uber)
视频回放

3.2 Metric 指标、监控、报警

【分享嘉宾】孙梦瑶(美团点评 研发工程师)
视频回放

3.3 如何利用 Flink 和深度学习模型实现垃圾图片分类

【分享嘉宾】陈戊超(阿里巴巴 技术专家)
视频回放

3.4 Flink CEP 实战

【分享嘉宾】刘博(哈啰出行 大数据实时平台资深开发)
视频回放
文章整理

3.5 Flink 实时数仓的应用

【分享嘉宾】黄伟伦(美团点评 数据系统研发工程师)
视频回放

3.6 State Processor API 介绍与演示

【分享嘉宾】戴资力(Apache Flink PMC)
视频回放

3.7 Flink 常见问题诊断

【分享嘉宾】杨阳(阿里巴巴 高级运维工程师)
视频回放

3.8 大规模场景的高阶运维

【分享嘉宾】王华(阿里巴巴 运维专家)
视频回放

3.9 Flink 作业问题分析和调优实践

【分享嘉宾】李康(虎牙 实时平台负责人)
视频回放

3.10 Flink 生产配置最佳实践

【分享嘉宾】席建刚(趣头条 实时平台负责人)
视频回放

3.11 基于 Apache Flink 的监控告警系统

【分享嘉宾】zhisheng(《Flink 实战与性能优化》专栏作者)
视频回放

3.12 30分钟教你如何入门 – Apache Flink 最全知识图谱详解

【分享嘉宾】程鹤群(军长)(Apache Flink Committer,阿里巴巴技术专家)
视频回放

3.13 【1.10特别篇】Demo: 基于 Flink SQL 构建离线应用

【分享嘉宾】李劲松(之信)(Apache Flink Committer,阿里巴巴技术专家)
视频回放

3.14 【1.10特别篇】Demo: 基于 Flink SQL 构建实时应用

【分享嘉宾】伍翀(云邪)(Apache Flink PMC,阿里巴巴技术专家)
视频回放

3.15 【1.10特别篇】Flink on Zeppelin: 极致体验(1) 入门 + Batch

【分享嘉宾】章剑锋(Apache Zeppelin PMC,阿里巴巴高级技术专家)
视频回放

3.16 【实时数仓篇】基于 Flink 的典型 ETL 场景实现

【分享嘉宾】买蓉(美团点评 高级技术专家)
视频回放

3.17 【1.10特别篇】Flink on Zeppelin: 极致体验(2) Streaming + 高级用法

【分享嘉宾】章剑锋(Apache Zeppelin PMC,阿里巴巴高级技术专家)
视频回放

3.18 【1.10特别篇】Alink 入门到实践

【分享嘉宾】杨旭(阿里巴巴资深算法专家)
直播:3月5日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.19 【实时数仓篇】利用 Flink 实现实时超时统计场景

【分享嘉宾】马汶园(菜鸟 数据工程师)
直播:3月10日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.20 【实时数仓篇】利用 Flink 实现实时状态复用场景

【分享嘉宾】李晨(菜鸟 数据工程师)
直播:3月12日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.21 【1.10特别篇】PyFlink 架构、应用案例及未来规划

【分享嘉宾】孙金城(Apache Flink PMC,Apache Beam Committer,阿里巴巴高级技术专家)
直播:3月17日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.22 【实时数仓篇】Flink CEP 及 应用场景

【分享嘉宾】薛康(滴滴 资深研发工程师)
直播:3月19日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.23 【实时数仓篇】Flink 窗口函数的应用场景

【分享嘉宾】张俊(Apache Flink Contributor,OPPO大数据平台研发负责人)
直播:3月26日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.24 【1.10特别篇】细粒度资源管理

【分享嘉宾】宋辛童(Apache Flink Contributor,阿里巴巴高级开发工程师)
直播:3月31日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.25 【1.10特别篇】native on Kubernetes

【分享嘉宾】王阳(阿里巴巴实时计算引擎团队研发专家)
直播:4月2日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.26 【直播主题】PyFlink 最新功能介绍

【分享嘉宾】程鹤群(军长)(Apache Flink Committer,阿里巴巴技术专家)
直播:4月16日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

相关实践学习
基于Hologres轻松玩转一站式实时仓库
本场景介绍如何利用阿里云MaxCompute、实时计算Flink和交互式分析服务Hologres开发离线、实时数据融合分析的数据大屏应用。
Linux入门到精通
本套课程是从入门开始的Linux学习课程,适合初学者阅读。由浅入深案例丰富,通俗易懂。主要涉及基础的系统操作以及工作中常用的各种服务软件的应用、部署和优化。即使是零基础的学员,只要能够坚持把所有章节都学完,也一定会受益匪浅。
相关文章
|
5月前
|
存储 人工智能 大数据
The Past, Present and Future of Apache Flink
本文整理自阿里云开源大数据负责人王峰(莫问)在 Flink Forward Asia 2024 上海站主论坛开场的分享,今年正值 Flink 开源项目诞生的第 10 周年,借此时机,王峰回顾了 Flink 在过去 10 年的发展历程以及 Flink社区当前最新的技术成果,最后展望下一个十年 Flink 路向何方。
533 33
The Past, Present and Future of Apache Flink
|
1月前
|
存储 SQL 缓存
Apache Doris & SelectDB 技术能力全面解析
本文将对 Doris & SelectDB 适合的分析场景和技术能力进行概述解析
Apache Doris & SelectDB 技术能力全面解析
|
7月前
|
SQL Java API
Apache Flink 2.0-preview released
Apache Flink 社区正积极筹备 Flink 2.0 的发布,这是自 Flink 1.0 发布以来的首个重大更新。Flink 2.0 将引入多项激动人心的功能和改进,包括存算分离状态管理、物化表、批作业自适应执行等,同时也包含了一些不兼容的变更。目前提供的预览版旨在让用户提前尝试新功能并收集反馈,但不建议在生产环境中使用。
1309 13
Apache Flink 2.0-preview released
|
2月前
|
SQL 存储 人工智能
Apache Flink 2.0.0: 实时数据处理的新纪元
Apache Flink 2.0.0 正式发布!这是自 Flink 1.0 发布九年以来的首次重大更新,凝聚了社区两年的努力。此版本引入分离式状态管理、物化表、流批统一等创新功能,优化云原生环境下的资源利用与性能表现,并强化了对人工智能工作流的支持。同时,Flink 2.0 对 API 和配置进行了全面清理,移除了过时组件,为未来的发展奠定了坚实基础。感谢 165 位贡献者的辛勤付出,共同推动实时计算进入新纪元!
341 1
Apache Flink 2.0.0: 实时数据处理的新纪元
|
7月前
|
存储 缓存 算法
分布式锁服务深度解析:以Apache Flink的Checkpointing机制为例
【10月更文挑战第7天】在分布式系统中,多个进程或节点可能需要同时访问和操作共享资源。为了确保数据的一致性和系统的稳定性,我们需要一种机制来协调这些进程或节点的访问,避免并发冲突和竞态条件。分布式锁服务正是为此而生的一种解决方案。它通过在网络环境中实现锁机制,确保同一时间只有一个进程或节点能够访问和操作共享资源。
247 3
|
2月前
|
存储 大数据 数据处理
您有一份 Apache Flink 社区年度报告请查收~
您有一份 Apache Flink 社区年度报告请查收~
|
5月前
|
存储 SQL 人工智能
Apache Flink 2.0:Streaming into the Future
本文整理自阿里云智能高级技术专家宋辛童、资深技术专家梅源和高级技术专家李麟在 Flink Forward Asia 2024 主会场的分享。三位专家详细介绍了 Flink 2.0 的四大技术方向:Streaming、Stream-Batch Unification、Streaming Lakehouse 和 AI。主要内容包括 Flink 2.0 的存算分离云原生化、流批一体的 Materialized Table、Flink 与 Paimon 的深度集成,以及 Flink 在 AI 领域的应用。
948 13
Apache Flink 2.0:Streaming into the Future
|
7月前
|
存储 分布式计算 druid
大数据-149 Apache Druid 基本介绍 技术特点 应用场景
大数据-149 Apache Druid 基本介绍 技术特点 应用场景
146 1
大数据-149 Apache Druid 基本介绍 技术特点 应用场景
|
7月前
|
分布式计算 监控 大数据
大数据-148 Apache Kudu 从 Flink 下沉数据到 Kudu
大数据-148 Apache Kudu 从 Flink 下沉数据到 Kudu
173 1
|
7月前
|
存储 运维 监控
实时计算Flink版在稳定性、性能、开发运维、安全能力等等跟其他引擎及自建Flink集群比较。
实时计算Flink版在稳定性、性能、开发运维和安全能力等方面表现出色。其自研的高性能状态存储引擎GeminiStateBackend显著提升了作业稳定性,状态管理优化使性能提升40%以上。核心性能较开源Flink提升2-3倍,资源利用率提高100%。提供一站式开发管理、自动化运维和丰富的监控告警功能,支持多语言开发和智能调优。安全方面,具备访问控制、高可用保障和全链路容错能力,确保企业级应用的安全与稳定。
125 0

相关产品

  • 实时计算 Flink版
  • 推荐镜像

    更多