官宣 | Fluss 正式加入 Apache 孵化器

简介: 6 月 5 日,由阿里巴巴开源并捐赠的新一代流存储 Fluss 项目,顺利通过了投票,正式成为全球最大的开源基金会 Apache 软件基金会(ASF)的孵化项目!

6 月 5 日,由阿里巴巴开源并捐赠的新一代流存储 Fluss 项目,顺利通过了投票,正式成为全球最大的开源基金会 Apache 软件基金会(ASF)的孵化项目!这是 Fluss 社区发展的重要里程碑,标志着项目迈入更加开放、中立和规范的新阶段。未来,Fluss 将依托 Apache 生态,加速构建全球化的开发者社区,持续推动新一代实时数据基础设施的创新与落地。

Fluss 社区已于近日完成了所有捐赠的流程,并将 Fluss 项目正式移交到了 Apache 软件基金会名下。在 7月3日于新加坡举办的 Flink Forward Asia 2025 的主题演讲中,项目发起人 伍翀(云邪)正式宣布了这一激动的消息,并分享了新仓库地址( https://github.com/apache/fluss/ ) 和官方网站域名( https://fluss.apache.org/ )。

什么是 Fluss?

Fluss 是一款面向实时分析场景设计的下一代流存储引擎,致力于解决传统流存储技术在流计算、Lakehouse 等分析场景中面临的高成本与低效率问题。它具备以下核心特性:

  • 列式流存储:支持毫秒级延迟的实时流读流写能力,以 Apache Arrow 列存格式存储实时流数据,通过列裁剪、分区裁剪等查询下推技术,可提升 10 倍读取性能并降低网络成本。
  • 实时更新与点查:创新性地将实时更新能力引入流存储中。通过高性能流式更新、部分列更新、binlog、维表点查以及 DeltaJoin 等特性,高效协同 Flink 构建低成本流式实时数仓。
  • 湖流一体:湖与流一体化存储,实现数据共享。Lakehouse 为流存储提供低成本的历史数据支持,而流存储则为 Lakehouse 注入实时数据能力,带来实时数据分析的体验,构建流批一体秒级湖仓。

Fluss 的发展历史与现状

2023 年 7 月,阿里云智能 Flink 团队正式启动了 Fluss 项目。项目名称源自 “Flink Unified Streaming Storage” 的缩写,寓意为 Apache Flink 打造统一的流式存储底座。巧合的是,“Fluss”在德语中意为“河流”,正如源源不断的数据流。

经过一年多的内部孵化与打磨,2024 年 11 月 29 日,在上海举办的 Flink Forward Asia 2024 大会主题演讲中,阿里巴巴正式宣布开源 Fluss 项目。自此,Fluss 迎来了多元化的国际化发展,吸引了来自全球的 60 多位开发者贡献代码,社区活跃度持续提升,平均每三个月发布一个重大版本。

与此同时,Fluss 在阿里巴巴集团内部也实现了大规模落地应用。目前,已支持超过 3 PB 数据规模,集群吞吐峰值达 40 GB/s,最大单表点查 QPS 达到 50 万次/秒,单表数据量最高可达 5000 亿条。在日志流量分析、搜索推荐、实时数仓等关键业务场景,Fluss 展现出卓越的性能与能力。

为什么加入 ASF 孵化器?

Apache 软件基金会是全球开源大数据技术的摇篮,孕育了众多改变世界的项目:Hadoop, Spark, Iceberg, Kafka, Flink 等。Fluss 期待加入 ASF,成为改变未来实时基础设施的一员。与此同时,Fluss 与这些 Apache 项目之间有着深度集成的需求,加入 ASF 能够加速与生态集成的进程。更重要的是,ASF 所倡导的“开放、协作、中立”理念,与 Fluss 的发展愿景高度契合。通过加入 Apache 孵化器,Fluss 不仅延续这一开源精神,也将融入更广阔的开发者社区,获得更完善的治理机制与可持续发展的坚实保障。

致谢

特别感谢 Fluss 的孵化导师们在项目进入 ASF 孵化器的过程中给予了很多支持和帮助。

  • @李钰(Champion):Flink、HBase项目 PMC 成员,多个开源项目导师,作为导师成功孵化了 Apache Paimon、Apache Celeborn 等多个顶级项目。
  • @李劲松:Apache Paimon PMC Chair,Apache Flink PMC 成员。
  • @tison:Pulsar、ZooKeeper、Curator 项目 PMC 成员,多个开源项目导师,公众号《夜天之书》作者,同时也是今年当选的 Apache 董事。
  • @秦江杰:多个开源项目导师,Flink、Kafka 等项目 PMC 成员。
  • @Jean-Baptiste Onofré:Karaf PMC Chair,ActiveMQ、Archiva、Aries、Beam、Brooklyn、Camel、Carbondata、Felix 等项目 PMC 成员。同时也是 Apache Polaris 孵化导师。

同时感谢所有 Fluss 社区的贡献者们!

加入我们

我们诚挚地邀请对 Fluss 感兴趣的各位开发者和用户加入开源社区,共同推动项目更进一步的发展,您可以通过以下方式关注和了解社区的最近动态,期待您的加入!


更多内容


活动推荐

阿里云基于 Apache Flink 构建的企业级产品-实时计算 Flink 版现开启活动:
新用户复制点击下方链接或者扫描二维码即可0元免费试用 Flink + Paimon
实时计算 Flink 版(3000CU*小时,3 个月内)
了解活动详情:https://free.aliyun.com/?utm_content=g_1000395379&productCode=sc

相关实践学习
基于Hologres+Flink搭建GitHub实时数据大屏
通过使用Flink、Hologres构建实时数仓,并通过Hologres对接BI分析工具(以DataV为例),实现海量数据实时分析.
实时计算 Flink 实战课程
如何使用实时计算 Flink 搞定数据处理难题?实时计算 Flink 极客训练营产品、技术专家齐上阵,从开源 Flink功能介绍到实时计算 Flink 优势详解,现场实操,5天即可上手! 欢迎开通实时计算 Flink 版: https://cn.aliyun.com/product/bigdata/sc Flink Forward Asia 介绍: Flink Forward 是由 Apache 官方授权,Apache Flink Community China 支持的会议,通过参会不仅可以了解到 Flink 社区的最新动态和发展计划,还可以了解到国内外一线大厂围绕 Flink 生态的生产实践经验,是 Flink 开发者和使用者不可错过的盛会。 去年经过品牌升级后的 Flink Forward Asia 吸引了超过2000人线下参与,一举成为国内最大的 Apache 顶级项目会议。结合2020年的特殊情况,Flink Forward Asia 2020 将在12月26日以线上峰会的形式与大家见面。
相关文章
|
11月前
|
SQL 分布式计算 流计算
官宣|Apache Paimon 1.0 发布公告
官宣|Apache Paimon 1.0 发布公告
768 8
|
SQL API Apache
官宣|Apache Flink 1.20 发布公告
Apache Flink 1.20.0 已发布,这是迈向 Flink 2.0 的最后一个小版本,后者预计年底发布。此版本包含多项改进和新功能,涉及 13 个 FLIPs 和 300 多个问题解决。亮点包括引入物化表简化 ETL 管道开发,统一检查点文件合并机制减轻文件系统压力,以及 SQL 语法增强如支持 `DISTRIBUTED BY` 语句。此外,还进行了大量的配置项清理工作,为 Flink 2.0 铺平道路。这一版本得益于 142 位贡献者的共同努力,其中包括来自中国多家知名企业的开发者。
2343 7
官宣|Apache Flink 1.20 发布公告
|
存储 分布式计算 Apache
官宣|Apache Paimon 毕业成为顶级项目,数据湖步入实时新篇章!
Apache Paimon 在构建实时数据湖与流批处理技术领域取得了重大突破,数据湖步入实时新篇章!
4395 6
官宣|Apache Paimon 毕业成为顶级项目,数据湖步入实时新篇章!
|
SQL Java API
官宣|Apache Flink 1.19 发布公告
Apache Flink PMC(项目管理委员)很高兴地宣布发布 Apache Flink 1.19.0。
3229 2
官宣|Apache Flink 1.19 发布公告
|
消息中间件 API Apache
官宣|阿里巴巴捐赠的 Flink CDC 项目正式加入 Apache 基金会
本文整理自阿里云开源大数据平台徐榜江 (雪尽),关于阿里巴巴捐赠的 Flink CDC 项目正式加入 Apache 基金会。
2467 2
官宣|阿里巴巴捐赠的 Flink CDC 项目正式加入 Apache 基金会
|
SQL 存储 Java
官宣|Apache Flink 1.18 发布公告
官宣|Apache Flink 1.18 发布公告
2173 3
官宣|Apache Flink 1.18 发布公告
|
SQL 分布式计算 Apache
官宣|Apache Paimon 0.6.0 发布公告
官宣|Apache Paimon 0.6.0 发布公告
1071 2
|
分布式计算 Apache 流计算
官宣!流计算开发管理框架 StreamPark 成功进入 Apache 孵化器
官宣!流计算开发管理框架 StreamPark 成功进入 Apache 孵化器
473 0
|
4月前
|
人工智能 数据处理 API
阿里云、Ververica、Confluent 与 LinkedIn 携手推进流式创新,共筑基于 Apache Flink Agents 的智能体 AI 未来
Apache Flink Agents 是由阿里云、Ververica、Confluent 与 LinkedIn 联合推出的开源子项目,旨在基于 Flink 构建可扩展、事件驱动的生产级 AI 智能体框架,实现数据与智能的实时融合。
793 6
阿里云、Ververica、Confluent 与 LinkedIn 携手推进流式创新,共筑基于 Apache Flink Agents 的智能体 AI 未来
|
存储 Cloud Native 数据处理
从嵌入式状态管理到云原生架构:Apache Flink 的演进与下一代增量计算范式
本文整理自阿里云资深技术专家、Apache Flink PMC 成员梅源在 Flink Forward Asia 新加坡 2025上的分享,深入解析 Flink 状态管理系统的发展历程,从核心设计到 Flink 2.0 存算分离架构,并展望未来基于流批一体的通用增量计算方向。
454 0
从嵌入式状态管理到云原生架构:Apache Flink 的演进与下一代增量计算范式

推荐镜像

更多