4.RabbitMQ 与 Kafka 的区别?

简介: 4.RabbitMQ 与 Kafka 的区别?

有参考 Kafka 消息队列,最终选择了 RabbitMQ,原因如下:

  1. 消息可靠性方面。Kafka 不能保证消息的完全可靠,对数据丢失不敏感;而 RabbitMQ 则保证绝对可靠 (AMOP 特性)。
  2. 消息传递方面。Kafka 中生产者发出的消息被均匀分布到多个 part 中,broker 收到消息后写入 segment 文件,只能当 segment 的消息条数达到配置数或者消息发布时间超过阈值时,segment 上的消息才会被 flush 到磁盘,最终被消费者收到;而 Rabbit 通过交换机 (Exchange) 实时转发消息。
  3. RabbitMQ 适合处理数据量小,但得保证实时且高可靠的消息。而 Kafka 的具有较高的数据吞吐量。
  4. RabbitMQ 的服务生产者和消费者能力需对等,否则消息堆积影响性能。而 Kafka 大量依赖 Zookeeper,我们的除了要监控 Kafka 之外还得监控 Zookeeper。
  5. Kafka 比较轻量级,而 RabbitMQ 比较重。
  6. 总的来说,对于选择 Kafka 还是 RabbitMQ,主要考虑三个因素:吞吐量可靠性平台熟悉度。如果是需要流处理和高并发的日志处理,首选 Kafka。但是大部分公司并没有什么高并发的处理,因此可以着重考虑可靠性和平台熟悉度,Kafka 也是有策略可以设置消息可靠的,但可靠性不如 RabbitMQ 好。RabbiMQ 使用简易,基本上就是” 开箱即用 “。

image.png

QPS(Queries Pre Second) :qps 为服务端每秒能执行的查询总数

RabbitMQ 与 Kafka 的区别参考:

消息中间件选型分析:从 Kafka 与 RabbitMQ 的对比看全局 - 掘金 (juejin.cn)

RabbitMQ 与 Kafka 选型对比 - 陈珙 - 博客园 (cnblogs.com)

面试题:Kafka、ActiveMQ、RabbitMQ、RocketMQ 有什么优缺点 (qq.com)

相关文章
|
2月前
|
消息中间件 负载均衡 Kafka
【Kafka面试演练】那Kafka消费者手动提交、自动提交有什么区别?
嗯嗯Ok。分区的作用主要就是为了提高Kafka处理消息吞吐量。每一个topic会被分为多个分区。假如同一个topic下有n个分区、n个消费者,这样的话每个分区就会发送消息给对应的一个消费者,这样n个消费者负载均衡地处理消息。同时生产者会发送消息给不同分区,每个分区分给不同的brocker处理,让集群平坦压力,这样大大提高了Kafka的吞吐量。面试官思考中…
73 4
|
2月前
|
消息中间件 存储 Kafka
RabbitMQ、RocketMQ和Kafka全面对决,谁是最佳选择?
1、应用场景 1.RabbitMQ: 适用于易用性和灵活性要求较高的场景 异步任务处理:RabbitMQ提供可靠的消息传递机制,适用于处理异步任务,例如将耗时的任务放入消息队列中,然后由消费者异步处理,提高系统的响应速度和可伸缩性。 解耦系统组件:通过使用RabbitMQ作为消息中间件,不同的系统组件可以通过消息进行解耦,实现松耦合的架构,提高系统的可维护性和灵活性。 事件驱动架构:RabbitMQ的发布-订阅模式可以用于构建事件驱动架构,将系统中的事件作为消息发布到相应的主题,不同的消费者可以订阅感兴趣的主题进行相应的处理。
204 2
|
22天前
|
消息中间件 分布式计算 监控
Python面试:消息队列(RabbitMQ、Kafka)基础知识与应用
【4月更文挑战第18天】本文探讨了Python面试中RabbitMQ与Kafka的常见问题和易错点,包括两者的基础概念、特性对比、Python客户端使用、消息队列应用场景及消息可靠性保证。重点讲解了消息丢失与重复的避免策略,并提供了实战代码示例,帮助读者提升在分布式系统中使用消息队列的能力。
34 2
|
3天前
|
消息中间件 监控 负载均衡
rabbitmq与kafka的区别
RabbitMQ提供了强大的可靠性保障,通过持久化机制和消息确认机制来确保消息的可靠传输和消费。而Kafka也提供了类似的可靠性保障,但其持久化机制和消息确认机制的实现方式与RabbitMQ有所不同。
|
18天前
|
消息中间件 存储 Java
RabbitMQ-同步和异步区别&快速入门
RabbitMQ-同步和异步区别&快速入门
18 1
|
1月前
|
消息中间件 负载均衡 Kafka
【Kafka】Kafka 新旧消费者的区别
【4月更文挑战第7天】【Kafka】Kafka 新旧消费者的区别
|
2月前
|
消息中间件 存储 Kafka
【深入浅出 RocketMQ原理及实战】「底层源码挖掘系列」透彻剖析贯穿一下RocketMQ和Kafka索引设计原理和方案
【深入浅出 RocketMQ原理及实战】「底层源码挖掘系列」透彻剖析贯穿一下RocketMQ和Kafka索引设计原理和方案
53 1
|
2月前
|
消息中间件 算法 Java
面试官:Kafka和ES选主有什么区别?
Kafka 和 ES,作为大数据处理的中间件,分别用于流处理和全文检索。它们的选主(Kafka 的 Controller 和 ES 的 Master)都基于 Raft 算法实现一致性。Raft 算法通过选举确保分布式系统数据一致性,涉及领导者、追随者和候选人间的身份转换。当超过一半的节点投票给同一候选节点时,该节点成为新领导者。Kafka 和 ES 在此基础上可能有各自优化调整。更多关于 Raft 算法的详细流程和选举规则见原文。
55 2
|
2月前
|
消息中间件 缓存 API
|
4月前
|
消息中间件 监控 负载均衡
Kafka高级应用:如何配置处理MQ百万级消息队列?
在大数据时代,Apache Kafka作为一款高性能的分布式消息队列系统,广泛应用于处理大规模数据流。本文将深入探讨在Kafka环境中处理百万级消息队列的高级应用技巧。
185 0

热门文章

最新文章