博客专栏 | 深入浅出之透析RocketMQ原理及实战指南

简介: 博客专栏 | 深入浅出之透析RocketMQ原理及实战指南

前提概要


大家好,经过了6个月的消失后,终究我还是回来了,带回来了很多干货,接下来第一份礼物干货就是【RocketMQ入门到精通】,但是RocketMQ本身而言性能虽然不如Kafka或者MetaMQ、Pulsar那么出色,版本兼容性也有点差,特别是针对于延时发送消息的时候,还存在消息阻塞的问题,但是它对消息方面的功能和扩展还是很丰富的,在很多场景下,好多公司放弃了一些东西却得到了很多益处,有那么多缺点该咋办?但是不要怕,万变不离其宗,让我带着大家彻彻底底把RocketMQ学透,学通,不就好了?




项目开源主页

https://github.com/alibaba/RocketMQ

RocketMQ · 官方网站 | RocketMQ (apache.org)




技术大纲概要(深入浅出之透析RocketMQ原理及实战指南)


RocketMQ学习入门指南




RocketMQ初级特性能力




RocketMQ的中级特性能力


  • 长轮询 Pull和Push模式你选择哪个?为什么?区别在哪里?
  • 给你解释一下顺序消息原理
  • 顺序消息的问题还是很多的?不要乱用!
  • 在实际开发中什么情况需要你用事务消息!
  • 告诉你RocketMQ是如何实现发送消息负载均衡
  • 告诉你RocketMQ是如何实现消费消息负载均衡
  • 单机不行, HA,同步双写/异步复制是否可行?



RocketMQ的高级特性能力


  • Low Latency Messaging
  • 如何应对当Broker 的 Buffer 满了的情况,有则改之无则加勉。
  • 你尝试进行RocketMQ回溯消费吗?
  • 如何解决在高负载情况下的消息堆积?
  • 如何进行实现分布式事务,以及其原理是什么?
  • 开源化能力的延时发送消息的原理是什么?
  • 非开源化的定时消息实现的原理是什么,不是侵权,告诉你如何实现!
  • 透透彻彻的让你知道消息重试,包含发送和消费哦




RocketMQ存储特性和介绍


  • RocketMQ使用了什么类型的零拷贝技术及原理
  • RocketMQ使用哪种类型的文件系统透析
  • RocketMQ使用的数据存储结构透析
  • RocketMQ对应的磁盘上面的存储目录结构的透析
  • RocketMQ数据可靠性如何保证啊!



RocketMQ的顶级实战案例


  • 如何实现单机支持N万以上持久化队列
  • 速度决定的重要因素之刷盘策略:异步刷盘和同步刷盘
  • JVM进程也对内存的控制如何实现高可用?
  • 消息堆积问题解决办法
  • 如实现当消息消费失败,定时重试
  • 自己如何实现发送定时消息
  • 如何定义一个列但可以实现并行消费



RocketMQ的高级特性能力


  • 告诉你为什么可以按照 Message Id 查询消息
  • 告诉你为什么可以按照按照 Message Key 查询消息
  • RocketMQ 消息过滤
  • 服务器消息过滤
  • 简单消息过滤
  • 高级消息过滤



RocketMQ 通信组件


  • 网络协议
  • 心跳处理
  • 连接复用
  • 超时连接




结束陈词


以上就是我11-12月份的针对于【RocketMQ入门到精通】的所有相关技术分析介绍,欢迎大家多多指正!




相关实践学习
消息队列RocketMQ版:基础消息收发功能体验
本实验场景介绍消息队列RocketMQ版的基础消息收发功能,涵盖实例创建、Topic、Group资源创建以及消息收发体验等基础功能模块。
消息队列 MNS 入门课程
1、消息队列MNS简介 本节课介绍消息队列的MNS的基础概念 2、消息队列MNS特性 本节课介绍消息队列的MNS的主要特性 3、MNS的最佳实践及场景应用 本节课介绍消息队列的MNS的最佳实践及场景应用案例 4、手把手系列:消息队列MNS实操讲 本节课介绍消息队列的MNS的实际操作演示 5、动手实验:基于MNS,0基础轻松构建 Web Client 本节课带您一起基于MNS,0基础轻松构建 Web Client
相关文章
|
6天前
|
消息中间件 存储 Kafka
RocketMQ 工作原理图解,看这篇就够了!
本文详细解析了 RocketMQ 的核心架构、消息领域模型、关键特性和应用场景,帮助深入理解消息中间件的工作原理。关注【mikechen的互联网架构】,10年+BAT架构经验倾囊相授。
RocketMQ 工作原理图解,看这篇就够了!
|
3月前
|
消息中间件 存储 数据库
深入学习RocketMQ的底层存储设计原理
文章深入探讨了RocketMQ的底层存储设计原理,分析了其如何通过将数据和索引映射到内存、异步刷新磁盘以及消息内容的混合存储来实现高性能的读写操作,从而保证了RocketMQ作为一款低延迟消息队列的读写性能。
|
18天前
|
消息中间件 存储 Kafka
MQ 消息队列核心原理,12 条最全面总结!
本文总结了消息队列的12个核心原理,涵盖消息顺序性、ACK机制、持久化及高可用性等内容。关注【mikechen的互联网架构】,10年+BAT架构经验倾囊相授。
|
1月前
|
消息中间件 数据采集 中间件
RabbitMQ的使用—实战
RabbitMQ的使用—实战
|
2月前
|
消息中间件 缓存 Java
RocketMQ的JAVA落地实战
RocketMQ作为一款高性能、高可靠、高实时、分布式特点的消息中间件,其核心作用主要体现在异步处理、削峰填谷以及系统解耦三个方面。
168 0
|
3月前
|
消息中间件 负载均衡 API
RocketMQ生产者负载均衡(轮询机制)核心原理
文章深入分析了RocketMQ生产者的负载均衡机制,特别是轮询机制的实现原理,揭示了如何通过`ThreadLocal`技术和消息队列的选播策略来确保消息在多个队列之间均衡发送,以及如何通过灵活的API支持自定义负载均衡策略。
|
3月前
|
消息中间件 存储 负载均衡
RocketMQ消费者消费消息核心原理(含长轮询机制)
这篇文章深入探讨了Apache RocketMQ消息队列中消费者消费消息的核心原理,特别是长轮询机制。文章从消费者和Broker的交互流程出发,详细分析了Push和Pull两种消费模式的内部实现,以及它们是如何通过长轮询机制来优化消息消费的效率。文章还对RocketMQ的消费者启动流程、消息拉取请求的发起、Broker端处理消息拉取请求的流程进行了深入的源码分析,并总结了RocketMQ在设计上的优点,如单一职责化和线程池的使用等。
RocketMQ消费者消费消息核心原理(含长轮询机制)
|
3月前
|
消息中间件 存储 RocketMQ
2分钟看懂RocketMQ延迟消息核心原理
本文从源码层面解析了RocketMQ延迟消息的实现原理,包括延迟消息的使用、Broker端处理机制以及定时任务对延迟消息的处理流程。
2分钟看懂RocketMQ延迟消息核心原理
|
3月前
|
消息中间件 存储 缓存
RocketMQ发送消息原理(含事务消息)
本文深入探讨了RocketMQ发送消息的原理,包括生产者端的发送流程、Broker端接收和处理消息的流程,以及事务消息的特殊处理机制,提供了对RocketMQ消息发送机制全面的理解。
RocketMQ发送消息原理(含事务消息)
|
4月前
|
消息中间件 RocketMQ
MetaQ/RocketMQ 原理问题之当消费集群规模较大时,处理分配不到队列的Consumer的问题如何解决
MetaQ/RocketMQ 原理问题之当消费集群规模较大时,处理分配不到队列的Consumer的问题如何解决