AutoMQ 社区双周精选第十一期(2024.05.27~2024.06.12)

本文涉及的产品
Serverless 应用引擎 SAE,800核*时 1600GiB*时
可观测链路 OpenTelemetry 版,每月50GB免费额度
服务治理 MSE Sentinel/OpenSergo,Agent数量 不受限
简介: AutoMQ v1.0 追踪修复Apache Kafka 3.4.x多个BUG,提升CPU与GC性能。优化包括修复Raft线程异常、死锁及NPE问题,防止网络分区导致脑裂。Netty Chunk大小调整减少CPU使用,取消跨块分配策略以降低GC负担。此外,AutoBalancing的Reporter和Retriever现支持指定Listener Name进行安全配置。关注公众号获取更多社区更新,一起参与云原生消息中间件建设!

本期概要

欢迎来到 AutoMQ 第十一期双周精选!在过去两周里,主干动态方面,AutoMQ 跟进了 Apache Kafka 3.4.x BUG 修复,并进行了CPU & GC 性能优化。另外,AutoBalancing 的 Reporter 和 Retriever 也开始支持指定 Listener Name 配置接入点。

AutoMQ 主干动态

AutoMQ 1.0 跟进 **Apache Kafka 3.4.x BUG 修复**

https://github.com/AutoMQ/automq/pull/1391

  • [KAFKA-14644] 修复 Raft IO 线程异常可能导致 Controller 无法自愈的问题;

  • [KAFKA-14693] 修复 KRaft Controller 异常退出时可能存在死锁导致进程无法退出的问题;

  • [KAFKA-14946] 修复 KRaft Controller 可能因 NPE 导致异常退出的问题;

  • [KAFKA-15489] & [KAFKA-16144] 修复 KRaft Leader 网络分区可能导致脑裂的问题;

CPU & GC 性能优化

https://github.com/AutoMQ/automq/pull/1364

  • 将 Netty 的 Chunk 大小调整到 16MiB,避免 ByteBufSeqAlloc 分配内存的 PageFault 消耗 CPU 的问题;

  • 取消 ByteBufSeqAlloc 跨块分配策略,避免产生 CompositeByteBuf,导致读取时产生 Heap ByteBuf 增加 GC 负担;

AutoBalancing 支持认证 & 鉴权

https://github.com/AutoMQ/automq/pull/1316

  • AutoBalancing 的 Reporter 和 Retriever 支持指定 Listener Name 配置接入点。

以上是第十一期《双周精选》的内容,诚邀各位开源爱好者持续关注我们社区,跟我们一起构建云原生消息中间件!

目录
相关文章
|
3月前
|
消息中间件 Java Kafka
AutoMQ 社区双周精选第十二期(2024.06.29~2024.07.12)
欢迎来到 AutoMQ 第十一期双周精选!在过去两周里,主干动态方面,AutoMQ 跟进了 Apache Kafka 3.4.x BUG 修复,并进行了CPU & GC 性能优化,另外,AutoBalancing 的 Reporter 和 Retriever 也将支持指定 Listener Name 配置接入点。
27 1
AutoMQ 社区双周精选第十二期(2024.06.29~2024.07.12)
|
5月前
|
消息中间件 Cloud Native 调度
AutoMQ 社区双周精选第十期
AutoMQ 发布1.0.5版,更改默认日志滚动为大小滚动,限制日志空间在5GiB内,增强大规模对象删除性能。AutoBalancing调度加速,使用攒批间隔策略执行Action,每批对单一节点操作不超过50,批次间间隔5秒。
31 0
|
5月前
|
缓存 NoSQL 中间件
重磅来袭!腾讯T7手写高并发实战手册,称霸GitHub热榜
Netty为何这么火 Netty是互联网中间件领域使用最广泛、最核心的网络通信框架之一。几乎所有互联网中间件或者大数据领域均离不开Netty,掌握Netty是作为一名初中级工程师迈向高级工程师重要的技能之一。 Netty之所以受青睐,是因为Netty提供异步的、事件驱动的网络应用程序框架和工具。作为一个异步框架,Netty的所有IO操作都是异步非阻塞的,通过FutureListener机制,用户可以方便地主动获取或者通过通知机制获得IO操作结果。 为什么写Netty? 目前来说,主要的互联网公司,例如阿里、腾讯、美团、新浪、淘宝等,在高级工程师的面试过程中,就经常会问一些高
|
人工智能 编解码 边缘计算
|
运维 前端开发 JavaScript
学习Serverless的水货与干货笔记分享 | 🏆 技术专题第七期征文
前段时间看了一些Serverless的文章,恰好最近又听了一门Serverless的应用实践课程,就把笔记拿出来和大家分享一下,如表述有误还请各位斧正
|
消息中间件 运维 Cloud Native
分布式架构设计与技术分析 | 开发者社区精选文章合集(三十)
系统学习分布式架构设计对于技术人的成长非常关键,对于云原生开发者而言如何设计出符合云原生设计哲学的应用往往离不开分布式系统知识与方法论的运用。如何设计出高弹性、可配置、可分布、高性能、高容错、更安全、更韧性、快交付的原生应用往往是衡量开发者水准的重要参考。
分布式架构设计与技术分析 | 开发者社区精选文章合集(三十)
|
弹性计算 Kubernetes Cloud Native
开发者社区精选直播合集(四十一)| 探秘阿里黑科技 宜达
“宜搭”是阿里巴巴自主研发的,面向业务开发者使用的零代码业务应用搭建平台。通过可视化拖拉拽的方式编辑和配置页面、表单和流程,并支持一键发布到PC和手机端,让不会代码的人也能轻松搭建应用。
开发者社区精选直播合集(四十一)|  探秘阿里黑科技 宜达
|
新零售 存储 人工智能
开发者社区精选直播合集(四十)| 新零售展望与分析
马老师在阿里云栖大会上首提“新零售”的概念,指出线上线下加上现代物流合在一起,才能真正创造出新的零售,新零售也迅速成为业界关注的热点。
开发者社区精选直播合集(四十)|  新零售展望与分析
|
存储 Cloud Native 关系型数据库
详解PolarDB披荆斩棘的“杀手锏” | 开发者社区精选文章合集(四十)
PolarDB由阿里巴巴自主研发的下一代关系型分布式云原生数据库。在兼容传统数据库生态的同时,突破了传统单机硬件的限制,为用户提供大容量,高性能,极致弹性的数据库服务。技术上有哪些突破呢?
详解PolarDB披荆斩棘的“杀手锏” | 开发者社区精选文章合集(四十)
|
弹性计算 运维 资源调度
浅谈企业如何高效用云? | 开发者社区精选文章合集(三十四)
云上运维如何做到效率至上?最适合的云上资源调度管理方案是什么?
浅谈企业如何高效用云? | 开发者社区精选文章合集(三十四)
下一篇
无影云桌面