开发者社区 > 云原生 > 云消息队列 > 正文

有没有测过rocketmq集群(含有单个proxy)的性能瓶颈?

有没有测过rocketmq集群(含有单个proxy)的性能瓶颈?目前实际压测中,测到就算加大rocketmq服务器资源(CPU和内存)都没办法再增加TPS了,感觉是遇到rocketmq的性能瓶颈了

展开
收起
2401。 2023-07-31 12:18:29 79 0
2 条回答
写回答
取消 提交回答
  • 三副本带上这个修复,在5.1.2 https://github.com/apache/rocketmq/pull/6850
    此回答整理自钉群“群2-Apache RocketMQ 中国开发者钉钉群”。

    2023-08-01 13:37:11
    赞同 展开评论 打赏
  • RocketMQ作为一个高性能的消息中间件,可以处理大量的消息并提供良好的吞吐量。不过,在实际压测中遇到性能瓶颈是可能的。以下是一些可能导致性能瓶颈的因素:

    1. 硬件资源:首先,确保您的RocketMQ服务器具备足够的硬件资源,包括CPU、内存和磁盘存储。如果服务器资源已经达到极限,增加资源将无法进一步提高吞吐量。

    2. 网络带宽:消息传输会占用网络带宽,特别是在高负载情况下。如果网络带宽受限,可能会限制吞吐量的提升。确保网络连接稳定,并考虑增加网络带宽以提高性能。

    3. 消费者速度:如果消费者的处理能力有限,可能会导致消息堆积,进而影响整体吞吐量。优化消费者的业务逻辑和处理速度,确保其能够及时消费消息。

    4. 存储配置:RocketMQ使用磁盘来存储消息,合理的存储配置对性能至关重要。请确认磁盘I/O性能是否足够,且存储策略(异步刷盘、批量写入等)是否正确配置。

    5. Producer和Consumer的并发度:RocketMQ支持并行发送和消费消息,通过增加Producer和Consumer的并发度,可以提高整体吞吐量。确保合理配置并发度,并避免过度调高造成资源竞争或其他问题。

    6. 配置参数调优:RocketMQ提供了一系列的配置参数,可以根据实际情况进行调优。例如,可以调整消息存储方式、线程池大小、消息拉取批次大小等来优化性能。

    7. 数据分片:如果您的RocketMQ集群中有多个Broker,考虑将消息分散到不同的分片上,以平衡压力和提高吞吐量。

    2023-07-31 14:24:23
    赞同 展开评论 打赏

涵盖 RocketMQ、Kafka、RabbitMQ、MQTT、轻量消息队列(原MNS) 的消息队列产品体系,全系产品 Serverless 化。RocketMQ 一站式学习:https://rocketmq.io/

相关产品

  • 云消息队列 MQ
  • 相关电子书

    更多
    RocketMQ Client-GO 介绍 立即下载
    RocketMQ Prometheus Exporter 打造定制化 DevOps 平台 立即下载
    基于 RocketMQ Prometheus Exporter 打造定制化 DevOps 平台 立即下载