活动预告 | 5月16日 Streaming Lakehouse Meetup · Online 与你相约!

简介: 5月16日 Streaming Lakehouse Meetup · Online 与你相约!

随着 Apache Flink 技术社区的不断成熟和发展,越来越多企业开始利用 Flink 进行流式数据处理,从而提升数据时效性价值,获取业务实时化效果。与此同时,在大数据领域数据湖架构也日益成为新的技术趋势,越来越多企业开始采用 Lakehouse 架构,基于 DataLake 构建新一代 Data Warehouse。因此,Flink 社区希望能够将 Flink 的 Streaming 实时计算能力和 Lakehouse 新架构优势进一步结合,推出新一代的 Streaming Lakehouse 技术,促进数据在数据湖上真正实时流动起来,并为用户提供实时离线一体化的开发体验,Apache Paimon 应运而生。

Apache Paimon 是一项流式数据湖存储技术,可以提供高吞吐、低延迟的数据摄入、流式订阅以及实时查询能力。Paimon 采用开放的数据格式和技术理念,可以与 Apache Flink / Spark / Trino 等诸多业界主流计算引擎对接,共同推进 Streaming Lakehouse 架构的普及和发展。

北京时间 2024 年 5 月 16 日,开源软件基金会 Apache Software Foundation(以下简称 ASF)正式宣布 Apache Paimon 毕业成为 Apache 顶级项目(TLP, Top Level Project)。(官宣|Apache Paimon 毕业成为顶级项⽬,数据湖步⼊实时新篇章!)

Streaming Lakehouse Meetup

5月16日 | 线上

为了促进 Apache Paimon 技术的交流和发展,我们将于 5 月 16 日在线举办 Streaming Lakehouse Meetup · Online 。本次活动由阿里云开源大数据表存储团队负责人、阿里巴巴高级技术专家,Apache Flink PMC,Paimon PMC 李劲松(花名:之信)作为出品人,联合业内大咖共同分享 Apache Paimon 在各场景中的最佳实践、生产经验、技术原理等。

议题1

时间:14:00-14:10

标题:湖仓一体开启全面实时化时代

讲师:王峰,花名莫问。阿里云智能开源大数据平台负责人,Apache Flink 中文社区发起人,Apache Paimon PMC Member

议题简介:

湖仓一体(Lakehouse)已经成为新一代的大数据架构演进趋势,随着 Lakehouse 架构的日益成熟和落地,越来越多企业希望能够在 Lakehouse 上更加实时的处理和分析数据,Apache Paimon 的毕业正好为业界提供了实时数据湖存储解决方案,配合实时流计算 Apache Flink,可以帮助现代企业构建出新一代的实时湖仓数据分析架构。

议题2

时间:14:10-14:40

标题:Apache Paimon 统一大数据湖存储底座

讲师:李劲松,花名之信,Apache Paimon PMC Chair, 阿里云开源大数据表存储负责人

议题简介:

  1. 从孵化到毕业,Paimon 的发展与场景
  2. 统一存储底座,Paimon 与批、流、OLAP
  3. 完整生态集成,Paimon 的计算引擎推荐
  4. 阿里巴巴实践,Paimon 数据湖战役

议题3

时间:14:40-15:10

标题:Apache Paimon 在阿里智能数据应用

讲师:王伟骏,花名鸿历,Apache Yarn && Flink Contributor,阿里巴巴智能引擎事业部技术专家

议题简介:

  1. 智能数据业务背景介绍
  2. 引入数据湖的原因和场景
  3. 遇到的问题及解法
  4. 引入后的收益

议题4

时间:15:10-15:40

标题:Apache Paimon 在蚂蚁的应用场景

讲师:闵文俊,花名愚鲤,Apache Paimon Committer,目前主要负责蚂蚁流批一体和数据湖相关工作

议题简介:

  1. 蚂蚁目前应用 Paimon 的场景
  2. 蚂蚁在 Paimon 的功能增强
  3. 未来规划

活动详情

时间:5月16 日 14:00

直播观看链接:

pc端(开发者社区)- https://developer.aliyun.com/live/253976

微信扫码直达直播间:


更多内容

img


活动推荐

阿里云基于 Apache Flink 构建的企业级产品-实时计算 Flink 版现开启活动:
新用户复制点击下方链接或者扫描二维码即可0元免费试用 Flink + Paimon
实时计算 Flink 版(3000CU*小时,3 个月内)
了解活动详情:https://free.aliyun.com/?pipCode=sc

0CA9E977-9C4C-4444-94B3-F01C0B8C891B.png

相关实践学习
基于Hologres+Flink搭建GitHub实时数据大屏
通过使用Flink、Hologres构建实时数仓,并通过Hologres对接BI分析工具(以DataV为例),实现海量数据实时分析.
实时计算 Flink 实战课程
如何使用实时计算 Flink 搞定数据处理难题?实时计算 Flink 极客训练营产品、技术专家齐上阵,从开源 Flink功能介绍到实时计算 Flink 优势详解,现场实操,5天即可上手! 欢迎开通实时计算 Flink 版: https://cn.aliyun.com/product/bigdata/sc Flink Forward Asia 介绍: Flink Forward 是由 Apache 官方授权,Apache Flink Community China 支持的会议,通过参会不仅可以了解到 Flink 社区的最新动态和发展计划,还可以了解到国内外一线大厂围绕 Flink 生态的生产实践经验,是 Flink 开发者和使用者不可错过的盛会。 去年经过品牌升级后的 Flink Forward Asia 吸引了超过2000人线下参与,一举成为国内最大的 Apache 顶级项目会议。结合2020年的特殊情况,Flink Forward Asia 2020 将在12月26日以线上峰会的形式与大家见面。
相关文章
|
Linux Shell 网络安全
Mac Terminal ssh连接linux服务器中文乱码
整理了近期在项目上做的一些技术研究,希望与大家共同探讨交流。 场景:Mac OSterminal 本地中文显示正常ssh 登陆linux,服务器中文显示乱码 尝试解决:方法1. (未解决)在本地与服务器执行 locale 命令, 发现字符编码一致,都是 zh_CN.UTF-8。
5306 0
|
机器学习/深度学习 分布式计算 算法
深度解析开源推荐算法框架EasyRec的核心概念和优势
如何通过机器学习PAI实现快速构建推荐模型
3123 0
|
SQL 缓存 Java
flink cdc 同步问题之如何同步多张库表
Flink CDC(Change Data Capture)是一个基于Apache Flink的实时数据变更捕获库,用于实现数据库的实时同步和变更流的处理;在本汇总中,我们组织了关于Flink CDC产品在实践中用户经常提出的问题及其解答,目的是辅助用户更好地理解和应用这一技术,优化实时数据处理流程。
|
SQL 数据挖掘 Serverless
SQL 窗口函数简直太厉害啦!复杂数据分析的超强利器,带你轻松攻克数据难题,快来一探究竟!
【8月更文挑战第31天】在数据驱动时代,高效处理和分析大量数据至关重要。SQL窗口函数可对一组行操作并返回结果集,无需分组即可保留原始行信息。本文将介绍窗口函数的分类、应用场景及最佳实践,助您掌握这一强大工具。例如,在销售数据分析中,可使用窗口函数计算累计销售额和移动平均销售额,更好地理解业务趋势。
674 0
|
机器学习/深度学习 人工智能 语音技术
AI实现语音文字处理,PaddleSpeech项目安装使用 | 机器学习
AI实现语音文字处理,PaddleSpeech项目安装使用 | 机器学习
AI实现语音文字处理,PaddleSpeech项目安装使用 | 机器学习
|
6月前
|
人工智能 弹性计算 机器人
阿里云gpu云服务器包年包月和按量活动,丰富多样的GPU卡型和规格
阿里云推出GPU优惠活动,提供多样GPU卡型与弹性算力,助力AI应用落地。包括96GB显存+900GB/s NVLink的大规模模型推理卡型,及L20 GPU的轻量高效部署选项,满足不同场景需求。支持包年包月、按量付费等灵活计费模式,结合vLLM框架快速部署大模型,提升推理速度与吞吐量。此外,无影GPU云电脑企业版及百炼大模型调用服务,为用户提供高性价比算力,轻松开启AI新时代。
|
人工智能 小程序 数据处理
uni-app开发AI康复锻炼小程序,帮助肢体受伤患者康复!
近期,多家康复机构咨询AI运动识别插件是否适用于肢力运动受限患者的康复锻炼。本文介绍该插件在康复锻炼中的应用场景,包括康复运动指导、运动记录、恢复程度记录及过程监测。插件集成了人体检测、姿态识别等功能,支持微信小程序平台,使用便捷,安全可靠,帮助康复治疗更加高效精准。
|
算法 搜索推荐
数据结构与算法学习十八:堆排序
这篇文章介绍了堆排序是一种通过构建堆数据结构来实现的高效排序算法,具有平均和最坏时间复杂度为O(nlogn)的特点。
732 0
数据结构与算法学习十八:堆排序
|
Java 流计算
【万字长文】Flink cdc源码精讲(推荐收藏)(三)
【万字长文】Flink cdc源码精讲(推荐收藏)
822 0
【万字长文】Flink cdc源码精讲(推荐收藏)(三)