RabbitMQ原理

简介: 描述了RabbitMQ的原理和使用方法

1.异步调用:

我们以购买商品为例,用户支付后需要调用订单服务完成订单状态修改,调用物流服务,从仓库分配响应的库存并准备发货。

在事件模式中,支付服务是事件发布者(publisher),在支付完成后只需要发布一个支付成功的事件(event),事件中带上订单id。

订单服务和物流服务是事件订阅者(Consumer),订阅支付成功的事件,监听到事件后完成自己业务即可。

为了解除事件发布者与订阅者之间的耦合,两者并不是直接通信,而是有一个中间人(Broker)。发布者发布事件到Broker,不关心谁来订阅事件。订阅者从Broker订阅事件,不关心谁发来的消息。

image.png

Broker 是一个像数据总线一样的东西,所有的服务要接收数据和发送数据都发到这个总线上,这个总线就像协议一样,让服务间的通讯变得标准和可控。

好处:

  • 吞吐量提升:无需等待订阅者处理完成,响应更快速
  • 故障隔离:服务没有直接调用,不存在级联失败问题
  • 调用间没有阻塞,不会造成无效的资源占用
  • 耦合度极低,每个服务都可以灵活插拔,可替换
  • 流量削峰:不管发布事件的流量波动多大,都由Broker接收,订阅者可以按照自己的速度去处理事件

缺点:

  • 架构复杂了,业务没有明显的流程线,不好管理
  • 需要依赖于Broker的可靠、安全、性能

好在现在开源软件或云平台上 Broker 的软件是非常成熟的,比较常见的一种就是我们今天要学习的MQ技术。

2.基本结构

RabbitMQ中的一些角色:

  • publisher:生产者
  • consumer:消费者
  • exchange个:交换机,负责消息路由
  • queue:队列,存储消息
  • virtualHost:虚拟主机,隔离不同租户的exchange、queue、消息的隔离

image.png

3.RabbitMQ消息模型

RabbitMQ官方提供了5个不同的Demo示例,对应了不同的消息模型:

image.png



4.RabbitMQ原理简介

RabbitMQ是一个开源的消息代理软件,它实现了高级消息队列协议(AMQP),作为消息传递的中间件。它允许应用程序和服务之间通过消息进行通信,帮助构建弹性、可扩展和可靠的系统架构。

RabbitMQ基于生产者-消费者模型,消息发送方称为生产者,消息接收方称为消费者。生产者将消息发送到RabbitMQ的消息队列中,而消费者可以从队列中获取并处理这些消息。

使用RabbitMQ可以提供以下好处:

  1. 异步通信:通过消息队列,应用程序可以异步地发送和接收消息,降低系统间的耦合度,提高系统的可靠性和性能。
  2. 解耦系统组件:消息队列充当中间件,减少了系统组件间的直接依赖,使系统更加灵活和可扩展。
  3. 削峰填谷:通过消息队列,可以将请求进行缓冲,平衡系统负载,避免系统过载或请求丢失。
  4. 可靠性:RabbitMQ提供持久化消息、可靠的消息传递机制和消息确认机制,确保消息不会丢失。
  5. 多语言支持:RabbitMQ支持多种编程语言和平台,可以方便地与不同技术栈的应用程序进行集成。

总之,RabbitMQ是一个功能强大的消息代理软件,可以用于构建可靠、可扩展的分布式系统,并解决异步通信和系统之间解耦的问题。

image.png

5.使用RabbitMQ步骤

要使用RabbitMQ,需要进行以下步骤:

  1. 安装RabbitMQ:首先,你需要下载并安装RabbitMQ服务器。你可以从RabbitMQ官方网站(https://www.rabbitmq.com/)下载适合你操作系统的安装程序,并按照指示进行安装。
  2. 启动RabbitMQ服务器:安装完成后,你可以启动RabbitMQ服务器。在大多数操作系统中,你可以使用命令行或者图形界面启动。确保服务器成功启动并监听指定的端口。
  3. 连接到RabbitMQ:你的应用程序需要连接到RabbitMQ服务器才能发送和接收消息。在连接之前,你需要选择一个RabbitMQ客户端库,并将其添加到你的应用程序中。RabbitMQ提供了多种语言的客户端库,如Java、Python、JavaScript等。你可以根据你的应用程序语言选择适合的客户端库。
  4. 创建队列:在发送和接收消息之前,你需要创建一个消息队列。消息队列是RabbitMQ中的存储单位,用于在生产者和消费者之间传递消息。你可以使用RabbitMQ的管理界面或客户端库提供的API来创建队列。
  5. 发布消息:生产者通过将消息发送到队列中来发布消息。你可以使用客户端库提供的API发送消息,并指定要发送到的队列。
  6. 消费消息:消费者从队列中获取消息并进行处理。你可以使用客户端库提供的API来监听队列,并在有新消息时触发回调函数进行处理。

以上是一个简单的使用RabbitMQ的流程。当然,RabbitMQ还有更多的高级特性,如交换机、绑定、路由等。你可以根据你的应用需求进一步学习和深入了解这些概念。

请注意,RabbitMQ的使用涉及到一些复杂的概念和配置。如果你是第一次接触,可能需要花些时间学习和理解这些概念。官方文档和示例代码将对你有很大的帮助。


相关实践学习
快速体验阿里云云消息队列RocketMQ版
本实验将带您快速体验使用云消息队列RocketMQ版Serverless系列实例进行获取接入点、创建Topic、创建订阅组、收发消息、查看消息轨迹和仪表盘。
消息队列 MNS 入门课程
1、消息队列MNS简介 本节课介绍消息队列的MNS的基础概念 2、消息队列MNS特性 本节课介绍消息队列的MNS的主要特性 3、MNS的最佳实践及场景应用 本节课介绍消息队列的MNS的最佳实践及场景应用案例 4、手把手系列:消息队列MNS实操讲 本节课介绍消息队列的MNS的实际操作演示 5、动手实验:基于MNS,0基础轻松构建 Web Client 本节课带您一起基于MNS,0基础轻松构建 Web Client
目录
相关文章
|
8月前
|
消息中间件 存储 缓存
RocketMQ原理—4.消息读写的性能优化
本文详细解析了RocketMQ消息队列的核心原理与性能优化机制,涵盖Producer消息分发、Broker高并发写入、Consumer拉取消息流程等内容。重点探讨了基于队列的消息分发、Hash有序分发、CommitLog内存写入优化、ConsumeQueue物理存储设计等关键技术点。同时分析了数据丢失场景及解决方案,如同步刷盘与JVM OffHeap缓存分离策略,并总结了写入与读取流程的性能优化方法,为理解和优化分布式消息系统提供了全面指导。
RocketMQ原理—4.消息读写的性能优化
|
8月前
|
消息中间件 存储 设计模式
RocketMQ原理—5.高可用+高并发+高性能架构
本文主要从高可用架构、高并发架构、高性能架构三个方面来介绍RocketMQ的原理。
2803 21
RocketMQ原理—5.高可用+高并发+高性能架构
|
8月前
|
存储 消息中间件 缓存
RocketMQ原理—3.源码设计简单分析下
本文介绍了Producer作为生产者是如何创建出来的、启动时是如何准备好相关资源的、如何从拉取Topic元数据的、如何选择MessageQueue的、与Broker是如何进行网络通信的,Broker收到一条消息后是如何存储的、如何实时更新索引文件的、如何实现同步刷盘以及异步刷盘的、如何清理存储较久的磁盘数据的,Consumer作为消费者是如何创建和启动的、消费者组的多个Consumer会如何分配消息、Consumer会如何从Broker拉取一批消息。
383 11
RocketMQ原理—3.源码设计简单分析下
|
8月前
|
存储 消息中间件 网络协议
RocketMQ原理—1.RocketMQ整体运行原理
本文详细解析了RocketMQ的整体运行原理,涵盖从生产者到消费者的全流程。首先介绍生产者发送消息的机制,包括Topic与MessageQueue的关系及写入策略;接着分析Broker如何通过CommitLog和ConsumeQueue实现消息持久化,并探讨同步与异步刷盘的优缺点。同时,讲解基于DLedger技术的主从同步原理,确保高可用性。消费者部分则重点讨论消费模式(集群 vs 广播)、拉取消息策略及负载均衡机制。网络通信层面,基于Netty的高性能架构通过多线程池分工协作提升并发能力。最后,揭示mmap与PageCache技术优化文件读写的细节,总结了RocketMQ的核心运行机制。
RocketMQ原理—1.RocketMQ整体运行原理
|
8月前
|
消息中间件 Java 数据管理
RocketMQ原理—2.源码设计简单分析上
本文介绍了NameServer的启动脚本、启动时会解析哪些配置、如何初始化Netty网络服务器、如何启动Netty网络服务器,介绍了Broker启动时是如何初始化配置的、BrokerController的创建以及包含的组件、BrokerController的初始化、启动、Broker如何把自己注册到NameServer上、BrokerOuterAPI是如何发送注册请求的,介绍了NameServer如何处理Broker的注册请求、Broker如何发送定时心跳
|
消息中间件 存储 数据库
深入学习RocketMQ的底层存储设计原理
文章深入探讨了RocketMQ的底层存储设计原理,分析了其如何通过将数据和索引映射到内存、异步刷新磁盘以及消息内容的混合存储来实现高性能的读写操作,从而保证了RocketMQ作为一款低延迟消息队列的读写性能。
|
消息中间件 存储 Kafka
RocketMQ 工作原理图解,看这篇就够了!
本文详细解析了 RocketMQ 的核心架构、消息领域模型、关键特性和应用场景,帮助深入理解消息中间件的工作原理。关注【mikechen的互联网架构】,10年+BAT架构经验倾囊相授。
RocketMQ 工作原理图解,看这篇就够了!
|
消息中间件 存储 Kafka
MQ 消息队列核心原理,12 条最全面总结!
本文总结了消息队列的12个核心原理,涵盖消息顺序性、ACK机制、持久化及高可用性等内容。关注【mikechen的互联网架构】,10年+BAT架构经验倾囊相授。
|
消息中间件 负载均衡 API
RocketMQ生产者负载均衡(轮询机制)核心原理
文章深入分析了RocketMQ生产者的负载均衡机制,特别是轮询机制的实现原理,揭示了如何通过`ThreadLocal`技术和消息队列的选播策略来确保消息在多个队列之间均衡发送,以及如何通过灵活的API支持自定义负载均衡策略。
|
消息中间件 存储 负载均衡
RocketMQ消费者消费消息核心原理(含长轮询机制)
这篇文章深入探讨了Apache RocketMQ消息队列中消费者消费消息的核心原理,特别是长轮询机制。文章从消费者和Broker的交互流程出发,详细分析了Push和Pull两种消费模式的内部实现,以及它们是如何通过长轮询机制来优化消息消费的效率。文章还对RocketMQ的消费者启动流程、消息拉取请求的发起、Broker端处理消息拉取请求的流程进行了深入的源码分析,并总结了RocketMQ在设计上的优点,如单一职责化和线程池的使用等。
RocketMQ消费者消费消息核心原理(含长轮询机制)