开发者社区精选直播合集(十三)| Apache Flink Meetup 直播回顾合集

本文涉及的产品
实时数仓Hologres,5000CU*H 100GB 3个月
实时计算 Flink 版,5000CU*H 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介: Apache Flink Meetup 已在全国举办多场,本期合集带大家回顾以往精彩视频,并欢迎大家观看8月7日线上直播!

往期精选合集包(戳我前往)

囊括了:AI、 架构、Serverless 、AIoT、DevOps、容器化、机器学习、云计算、K8s、微服务、云原生、视觉AI、大数据、小程序、物联网等各种主题直播合集。



Apache Flink Meetup · 北京站

image.png

>>戳我去观看


直播简介

2021年5月22日,Apache Flink 社区 1.13 新版本发布 Meetup 来啦!本次Apahce Flink Meetup 分为上下两场,嘉宾分别来自阿里巴巴、字节跳动、快手、爱奇艺和小红书。上半场将由 4 位技术专家带来 Flink 1.13 版本新功能的深入解读。例如 Winddow TVF,DataStream & Table API 交互等;下半场将另有 4 位资深行业技术专家分享 Flink 在互娱行业中的实践应用。全方位解析包括精准推荐、实时数仓、数据分析等在内的行业面临的典型问题。



Apache Flink x TiDB Meetup 北京站

image.png

>>戳我去观看


直播简介

本场 Meetup 由 Flink 社区与 TiDB 社区合办。一如既往,我们邀请了各行业的技术大牛,来自阿里巴巴、TiDB、360、知乎、网易的 5 位技术专家将围绕 Flink 和 TiDB,分享如何实现准确稳定的实时计算业务、如何搭建实时数仓数据链路的最佳实践、如何利用两者的特点完成端对端实时计算的闭环交付,以及 Flink SQL 和 Flink-CDC 架构的感悟与实践等。


Apache Flink x Iceberg Meetup 上海站

image.png

>>戳我去观看


直播介绍

Apahce Flink 社区2021年的首场线下 Meetup 正式开启!本次Apahce Flink x Iceberg Meetup邀请了来自阿里巴巴、腾讯、Dell、汽车之家的四位技术专家,聚焦 Flink x Iceberg 数据湖应用主题,围绕湖仓一体架构实践、Iceberg和对象存储的数据湖构建方案、超大规模数据入湖实践以及数据入湖面临的挑战等全方位剖析数据湖生产应用难题!


Apache Flink Meetup · 深圳站

image.png

>>戳我去观看


直播介绍

蔡适择-顺丰 大数据平台负责人

分享主题:《Hudi on Flink在顺丰的实践应用》

嘉宾简介:负责顺丰大数据平台建设及产品化工作,在大数据平台、物联网、边缘计算领域有丰富的实践经验,致力于大幅降低数据开发及应用门槛,让大数据技术成为一项人人可用、可快速应用的技术。

龚奇源-英特尔 机器学习工程师

分享主题:《用Analytics-Zoo和Flink实现隐私保护的Cluster Serving》

嘉宾简介:2016年博士毕业于东南大学,博士期间主要从事数据隐私相关研究。2017年加入英特尔,从事大数据和机器学习相关工作。他是大数据+AI开源项目Analytics-Zoo和大数据存储管理开源项目SSM的主要贡献者。目前,他主要负责Analytics-Zoo Privacy Preserving Machine Learning、Cluster Serving、Streaming、OpenVINO等工作。

董磊-腾讯视频 监控系统负责人

分享主题:《Flink 在腾讯视频的实践》

嘉宾简介:2018年加入腾讯,具备8年以上大数据处理经验。在大数据处理、流计算、机器学习、模型运行等方面具有丰富的实践经验。加入腾讯之后,担任视频播放质量监控系统负责人,主要关注分布式日志系统等工作。

胡争(子毅)-Apache HBase PMC,阿里巴巴技术专家

分享主题:《基于Flink+Iceberg构建企业级实时数据湖》

嘉宾简介:目前主要负责Flink数据湖方案的设计和开发工作,Apache Iceberg及Apache Flink项目的长期活跃贡献者,《HBase原理与实践》作者。


Apache Flink Meetup · 上海站

image.png

>>戳我去观看


直播简介

王新春

唯品会 数据平台实时团队高级架构师,主要负责实时计算平台、机器学习平台、实时数据清洗和实时报表等业务;在加入唯品会之前,是在美团点评(原大众点评)数据平台高级架构师;从零开始搭建实时计算平台以及数据平台工具体系开发和建设等工作。

宋佳明

英特尔 机器学习工程师,开源项目Analytics Zoo的重要贡献者,在机器学习,大数据,知识图谱有超过2年的经验。

栾艳明

小红书 实时平台负责人。设施的研发工作。

伍翀(云邪)

Apache Flink PMC member & Committer,阿里巴巴技术专家,北京理工大学硕士毕业。2015年加入阿里巴巴,从事 JStorm 的开发与设计。自2016年开始长期活跃于 Flink 社区,Flink/Blink SQL 模块的核心开发之一。Flink 在国内早期布道者之一。

Apache Flink online meetup 杭州站

image.png

>>戳我去观看


直播简介


议题一《袋鼠云基于flink实现的分布式数据同步工具FlinkX》

徐超 袋鼠云 资深技术专家,flink contributor,负责袋鼠云云原生一站式数据中台PaaS-数栈从0到1的产品研发;参与的数栈产品应用于大型政企、金融、教育、新零售等行业客户,曾负责京东方,招商证券,宁波发改委,浙大, 票付通等典型客户的数据中台项目的技术服务;目前专注于flink实时计算周边扩展,包括袋鼠云flinkx,flinkStreamSQL开源项目。

演讲简介

一:为什么选择基于flink 实现

  1. 分布式,简单的并发配置

  2. 易于扩展

  3. 高效性

二:整体结构(包括架构图)

三:如何实现控制并发和限流(原理和实现)

四:增量同步,断点续传(原理和实现)

五:实时采集(原理和实现)

六:当前版本插件的支持情况和未来的开发计划

议题二《网易云音乐实时数仓实践》

汪磊, 网易数据平台开发专家, 目前负责云音乐实时、离线、以及机器学习平台的建设工作

演讲简介

云音乐随着业务的发展, 对实时计算业务的需求越来愈多,要求越来越高,平台遇到挑战也越来越大,为了降低实时计算开发的门槛,更好的管控实时任务,提升系统的稳定性,我们整合了我们已有的底层服务开发了适合云音乐的实时数仓方案,本次主要主要介绍下我们整体的实践方案,面临的一些问题,以及未来的一些规划,整体大纲如下:

1、云音乐整体数据平台架构介绍

2、云音乐 Flink 实时数仓和元数据中心整合

3、目前面临一些问题和挑战

4、批流一体一些实践和规划

议题三《Apache Flink SQL 1.10 在有赞的实践应用》

沈磊  |  有赞数据研发工程师,英文名称 LakeShen,目前在有赞负责实时计算平台、以及 Flink 计算引起相关研发和维护工作。积极参与 Flink 开源社区,喜欢和大家分享 Flink 技术,个人也写了很多 Flink 相关技术文章,帮助大家一起学习 Flink。

演讲简介

本次演讲主要讲解 1.10 版本 Flink SQL 在有赞的实践应用,以及为什么选择 Flink SQL 。主要内容包括:实时平台 Flink SQL 开发实践、Flink Connector 端的实践和优化、Flink SQL 在有赞的业务支撑。

议题四《Apache Flink 在 AI 流程中的应用》

涂轶文,花名应言,2019年7月加入阿里巴巴,担任开发工程师,专注于flink ai生态领域的开发

演讲简介:在如今的AI场景中,Flink在流模式下得天独厚的优势给AI的发展带来了更多的可能,为了能够更好地支持更AI在不同场景下的发展,Flink社区和Flink的生态项目也在不断地努力着,本文将介绍Flink在AI场景中的应用,主要内容包括:

1、Background on Flink embracing AI

2、what is AI flow

3、meet Flink AI flow

4、An ML scenario


【即将直播】8月7日 Apache Flink Meetup 深圳站 线上直播


8月7日,Apache Flink Meetup 深圳站来啦!本场 Meetup 邀请了来自腾讯、第四范式、阿里巴巴的 4 位资深行业技术专家,将分享 Flink 如何帮助腾讯搭建万亿级实时数据入湖利器 Auto Optimizer Service,以及开发智能化的故障诊断和配置监控工具;又如何帮助第四范式建立 OpenMLDB 数据库实时更新系统。除了企业实践的分享外,Flink 1.14 版本的新特性预览也将会在本场 Meetup 中带给大家。

【爆款话题】

Flink 如何帮忙腾讯搭建万亿级实时数据入湖利器 Auto Optimizer

Flink 如何帮助腾讯开发智能化的故障诊断和配置监控工具

Flink 如何帮助第四范式建立 OpenMLDB 数据库实时更新系统

Flink 1.14 版本将会带来哪些值得期待的功能特性与体验优化


欢迎持续关注!将持续更新开发者社区精品直播内容!

相关实践学习
基于Hologres轻松玩转一站式实时仓库
本场景介绍如何利用阿里云MaxCompute、实时计算Flink和交互式分析服务Hologres开发离线、实时数据融合分析的数据大屏应用。
Linux入门到精通
本套课程是从入门开始的Linux学习课程,适合初学者阅读。由浅入深案例丰富,通俗易懂。主要涉及基础的系统操作以及工作中常用的各种服务软件的应用、部署和优化。即使是零基础的学员,只要能够坚持把所有章节都学完,也一定会受益匪浅。
相关文章
|
1月前
|
存储 人工智能 大数据
The Past, Present and Future of Apache Flink
本文整理自阿里云开源大数据负责人王峰(莫问)在 Flink Forward Asia 2024 上海站主论坛开场的分享,今年正值 Flink 开源项目诞生的第 10 周年,借此时机,王峰回顾了 Flink 在过去 10 年的发展历程以及 Flink社区当前最新的技术成果,最后展望下一个十年 Flink 路向何方。
344 33
The Past, Present and Future of Apache Flink
|
3月前
|
SQL Java API
Apache Flink 2.0-preview released
Apache Flink 社区正积极筹备 Flink 2.0 的发布,这是自 Flink 1.0 发布以来的首个重大更新。Flink 2.0 将引入多项激动人心的功能和改进,包括存算分离状态管理、物化表、批作业自适应执行等,同时也包含了一些不兼容的变更。目前提供的预览版旨在让用户提前尝试新功能并收集反馈,但不建议在生产环境中使用。
948 13
Apache Flink 2.0-preview released
|
3月前
|
存储 缓存 算法
分布式锁服务深度解析:以Apache Flink的Checkpointing机制为例
【10月更文挑战第7天】在分布式系统中,多个进程或节点可能需要同时访问和操作共享资源。为了确保数据的一致性和系统的稳定性,我们需要一种机制来协调这些进程或节点的访问,避免并发冲突和竞态条件。分布式锁服务正是为此而生的一种解决方案。它通过在网络环境中实现锁机制,确保同一时间只有一个进程或节点能够访问和操作共享资源。
144 3
|
2月前
|
分布式计算 大数据 Apache
Apache Spark & Paimon Meetup · 北京站,助力 LakeHouse 架构生产落地
2024年11月15日13:30北京市朝阳区阿里中心-望京A座-05F,阿里云 EMR 技术团队联合 Apache Paimon 社区举办 Apache Spark & Paimon meetup,助力企业 LakeHouse 架构生产落地”线下 meetup,欢迎报名参加!
117 3
|
3月前
|
存储 小程序 Apache
10月26日@杭州,飞轮科技 x 阿里云举办 Apache Doris Meetup,探索保险、游戏、制造及电信领域数据仓库建设实践
10月26日,由飞轮科技与阿里云联手发起的 Apache Doris 杭州站 Meetup 即将开启!
83 0
|
3月前
|
数据挖掘 物联网 数据处理
深入探讨Apache Flink:实时数据流处理的强大框架
在数据驱动时代,企业需高效处理实时数据流。Apache Flink作为开源流处理框架,以其高性能和灵活性成为首选平台。本文详细介绍Flink的核心特性和应用场景,包括实时流处理、强大的状态管理、灵活的窗口机制及批处理兼容性。无论在实时数据分析、金融服务、物联网还是广告技术领域,Flink均展现出巨大潜力,是企业实时数据处理的理想选择。随着大数据需求增长,Flink将继续在数据处理领域发挥重要作用。
274 0
|
5月前
|
存储 消息中间件 Java
Apache Flink 实践问题之原生TM UI日志问题如何解决
Apache Flink 实践问题之原生TM UI日志问题如何解决
55 1
|
4月前
|
SQL 消息中间件 关系型数据库
Apache Doris Flink Connector 24.0.0 版本正式发布
该版本新增了对 Flink 1.20 的支持,并支持通过 Arrow Flight SQL 高速读取 Doris 中数据。
|
5月前
|
消息中间件 监控 数据挖掘
基于RabbitMQ与Apache Flink构建实时分析系统
【8月更文第28天】本文将介绍如何利用RabbitMQ作为数据源,结合Apache Flink进行实时数据分析。我们将构建一个简单的实时分析系统,该系统能够接收来自不同来源的数据,对数据进行实时处理,并将结果输出到另一个队列或存储系统中。
336 2
|
5月前
|
消息中间件 分布式计算 Hadoop
Apache Flink 实践问题之Flume与Hadoop之间的物理墙问题如何解决
Apache Flink 实践问题之Flume与Hadoop之间的物理墙问题如何解决
72 3

推荐镜像

更多