Alibaba开发十年,写出这本“MQ技术手册”,看完我愣住了

简介: 消息队列已经逐渐成为企业IT系统内部通信的核心手段。它具有低耦合、可靠投递、广播、流量控制、最终一致性等一系列功能,成为异步RPC的主要手段之一。虽然说,目前状况是Kafka更为火热,但更为广泛的应该还属老牌的RabbtiMQ和Alibaba自主研发的RocketMQ。关于MQ相关的内容,Alibaba肯定还是很有话语权的,尤其是关于RocketMQ的使用,所以今天我们要分享的内容,实际上就是阿里P8的十年开发经验总结,写出来的这本“RabbitMQ+RocketMQ”技术手册,看完你也不得不感叹这份极品手册啊!

前言

消息队列已经逐渐成为企业IT系统内部通信的核心手段。它具有低耦合、可靠投递、广播、流量控制、最终一致性等一系列功能,成为异步RPC的主要手段之一。虽然说,目前状况是Kafka更为火热,但更为广泛的应该还属老牌的RabbtiMQ和Alibaba自主研发的RocketMQ。

关于MQ相关的内容,Alibaba肯定还是很有话语权的,尤其是关于RocketMQ的使用,所以今天我们要分享的内容,实际上就是阿里P8的十年开发经验总结,写出来的这本“RabbitMQ+RocketMQ”技术手册,看完你也不得不感叹这份极品手册啊!


网络异常,图片无法展示
|

一、RabbitMQ部分

1.RabbitMQ简介及入门

网络异常,图片无法展示
|

网络异常,图片无法展示
|

2.客户端开发向导

  • 连接RabbitMQ
  • 使用交换器和队列
  • 发送消息
  • 消费消息
  • 消费端的确认与拒绝
  • 关闭连接

网络异常,图片无法展示
|

网络异常,图片无法展示
|

3.RabbitMQ进阶

  • 消息何去何从
  • 过期时间(TTL)
  • 死信队列
  • 延迟队列
  • 优先级队列
  • RPC实现
  • 持久化
  • 生产者确认
  • 消费端要点介绍
  • 消息传输保障

网络异常,图片无法展示
|

网络异常,图片无法展示
|

4.RabbitMQ管理

  • 多租户与权限
  • 用户管理
  • Web端管理
  • 应用与集群管理
  • 服务端状态
  • HTTPAPI接口管理

网络异常,图片无法展示
|

5.RabbitMQ配置

  • 环境变量
  • 配置文件
  • 参数及策略

网络异常,图片无法展示
|

网络异常,图片无法展示
|

6.RabbitMQ运维

  • 集群搭建
  • 查看服务日志
  • 单节点故障恢复
  • 集群迁移
  • 集群监控

网络异常,图片无法展示
|

网络异常,图片无法展示
|

7.跨越集群的界限

  • Federation
  • Shovel

网络异常,图片无法展示
|

网络异常,图片无法展示
|

8.RabbitMQ高阶

  • 内存及磁盘告警
  • 流控
  • 镜像队列

网络异常,图片无法展示
|

网络异常,图片无法展示
|

9.网络分区

  • 网络分区的意义
  • 网络分区的判定
  • 网络分区的模拟
  • 网络分区的影响
  • 手动处理网络分区
  • 自动处理网络分区
  • 案例:多分区情形

网络异常,图片无法展示
|

网络异常,图片无法展示
|

10.RabbitMQ扩展

  • 消息追踪
  • 负载均衡

网络异常,图片无法展示
|

网络异常,图片无法展示
|

二、RocketMQ部分

1.阅读源代码前的准备

  • 获取和调试RocketMQ的源代码
  • RocketMQ源代码的目录结构
  • RocketMQ的设计理念和目标

网络异常,图片无法展示
|

网络异常,图片无法展示
|

2.RocketMQ路由中心NameServer

  • NameServer架构设计
  • NameSenver启动流程
  • NameSenve路由注册、故障剔除

网络异常,图片无法展示
|

网络异常,图片无法展示
|

3.RocketMQ消息发送

  • 漫谈RocketMQ消息发送
  • 认识RocketMQ消息
  • 生产者启动流程
  • 消息发送基本流程
  • 批量消息发送

网络异常,图片无法展示
|

网络异常,图片无法展示
|

4.RocketMQ消息存储

  • 存储概要设计
  • 初识消息存储
  • 消息发送存储流程
  • 存储文件组织与内存映射
  • RocketMQ存储文件
  • 实时更新消息消费队列与索引文
  • 消息队列与索引文件恢复
  • 文件刷盘机制
  • 过期文件删除机制

网络异常,图片无法展示
|

网络异常,图片无法展示
|

5.RocketMQ消息消费

  • RocketMQ消息消费概述
  • 消息消费者初探
  • 消费者启动流程
  • 消息拉取
  • 消息队列负载与重新分布机制
  • 消息消费过程
  • 定时消息机制
  • 消息过滤机制
  • 顺序消息

网络异常,图片无法展示
|

网络异常,图片无法展示
|

6.消息过滤FilterServer

  • ClassFilten运行机制
  • FilterServer注册剖析
  • 类过滤模式订阅机制
  • 消息拉取

网络异常,图片无法展示
|

网络异常,图片无法展示
|

7.RocketMQ主从同步(HA)机制

  • RocketMQ主从复制原理
  • RocketMQ读写分离机制

网络异常,图片无法展示
|

网络异常,图片无法展示
|

8.RocketMQ事务消息

  • 事务消息实现思想
  • 事务消息发送流程
  • 提交或回滚事务
  • 事务消息回查事务状态

网络异常,图片无法展示
|

网络异常,图片无法展示
|

9.RocketMQ实战

  • 消息批量发送
  • 消息发送队列自选择
  • 消息过滤
  • 事务消息
  • Spring整合RocketMQ
  • Spring Cloud整合RocketMQ
  • RocketMQ监控与运维命令
  • 应用场景分析

网络异常,图片无法展示
|

网络异常,图片无法展示
|

总结

实际上一般业务系统之间通信就是会采用RabbitMQ/RocketMQ,需要复杂的消息路由功能的支撑。大数据的实时计算场景才会采用Kafka,需要简单的消费模型,但是超高的吞吐量。

所以,作为Java开发,以RabbitMQ和RocketMQ为主来进行学习是比较重要的。最后,你再试问一下自己,对MQ到底掌握多少?会用到什么程度了呢?如果还不够,那就不能停下学习的脚步。

以上这份MQ手册肯定是100%免费分享给大家的,不过需要你们对我的文章多多支持!

本文就是愿天堂没有BUG给大家分享的内容,大家有收获的话可以分享下,想学习更多的话可以到微信公众号里找我,我等你哦。

相关实践学习
消息队列RocketMQ版:基础消息收发功能体验
本实验场景介绍消息队列RocketMQ版的基础消息收发功能,涵盖实例创建、Topic、Group资源创建以及消息收发体验等基础功能模块。
消息队列 MNS 入门课程
1、消息队列MNS简介 本节课介绍消息队列的MNS的基础概念 2、消息队列MNS特性 本节课介绍消息队列的MNS的主要特性 3、MNS的最佳实践及场景应用 本节课介绍消息队列的MNS的最佳实践及场景应用案例 4、手把手系列:消息队列MNS实操讲 本节课介绍消息队列的MNS的实际操作演示 5、动手实验:基于MNS,0基础轻松构建 Web Client 本节课带您一起基于MNS,0基础轻松构建 Web Client
相关文章
|
7月前
|
消息中间件 监控 Kafka
不愧是Alibaba技术官,Kafka的精髓全写这本“限量笔记”里,服了
分布式,是程序员必备技能之一,在面试过程中属于必备类的,在工作中更是会经常用到。而Kafka是一个分布式的基于发布订阅的消息队列,目前它的魅力是无穷的,对于Kafka的奥秘,还需要我们细细去探寻。
|
SpringCloudAlibaba Java 程序员
阿里最新产,SpringCloud微服务核心技术全解手册Github星标50k
SpringCloud想必每一位Java程序员都不会陌生,很多人一度把他称之为“微服务全家桶”,它通过简单的注解,就能快速地架构微服务,这也是SpringCloud的最大优势。但是最近有去面试过的朋友就会发现,现在面试你要是没有SpringCloud经验基本面试机会都不会有。
|
7月前
|
消息中间件 存储 Java
Alibaba开发十年,写出这本“MQ技术手册”,看完我愣住了
消息队列已经逐渐成为企业IT系统内部通信的核心手段。它具有低耦合、可靠投递、广播、流量控制、最终一致性等一系列功能,成为异步RPC的主要手段之一。虽然说,目前状况是Kafka更为火热,但更为广泛的应该还属老牌的RabbtiMQ和Alibaba自主研发的RocketMQ。
|
7月前
|
消息中间件 分布式计算 监控
腾讯技术官手撸笔记,全新演绎“Kafka部署实战”,已开源
我们知道,当下流行的MQ非常多,不过很多公司在技术选型上还是选择使用Kafka。与其他主流MQ进行对比,我们会发现Kafka最大的优点就是吞吐量高。实际上Kafka是高吞吐低延迟的高并发、高性能的消息中间件,配置良好的Kafka集群甚至可以做到每秒几十万、上百万的超高并发写入。
白瞟党乐坏了!Alibaba内部最新Java开发手册(嵩山版)灵魂17问
Java是世界各地开发者使用最多的编程语言,无论是在用户最喜爱的编程语言排行榜、程序员薪资榜单、编程入门首选语言等榜单上都是常年占据前三的位置的一种语言,但它也是最难学的语言之一。而《Java开发手册》可以算是学习Java,规范写法的必读书目了,那么你知道为什么要按照规约来吗?
|
7月前
|
SQL Java API
《Java开发手册灵魂13问》正式上线,带你剖析阿里巴巴的开发细节
一线大厂怎么用Java?看阿里技术专家给你分析!《〈Java开发手册(泰山版)〉灵魂13问》电子书正式上线带你剖析阿里巴巴一线团队开发思维。
|
7月前
|
缓存 算法 Java
堪称神级的阿里巴巴“高并发”教程《基础+实战+源码+面试+架构》
作为一个普普通通的程序员,如何才能提升自己的能力,在职场上拥有一技之长,这也成为普通的你我,迫切的需求。
|
消息中间件 设计模式 缓存
从零到一不一样的TOC商城项目:Cloud-Alibaba+DDD,私活利器开源
刚果商城是个从零到一的商城项目,包含商城核心业务和基础架构两大模块。 参照商城系统原型,推出用户、消息、商品、订单、优惠券、支付、网关、购物车等业务模块,通过商城系统中复杂场景,给出对应解决方案。使用 DDD 模型开发系统功能,帮助对 DDD 一知半解的开发者树立正确地开发思路。
|
消息中间件 程序员 Apache
阿里RocketMQ创始人首次分享出这份RocketMQ技术内幕神级架构手册
RocketMQ的发展史? RocketMQ的开源正是源于对这种开源文化的认同,开放是为了更好的协同创新,并将这一技术推向新的高度。在经历了阿里巴巴集团内部多年“双11”交易核心链路工业级场景在验证,2016年11月,团队将RocketMQ捐献给全球享有盛誉的Apache软件基金会正式质为孵化项目。 至此,RocketMQ开启了迈向全球顶级开源软件的新征程。
|
架构师 Java 中间件
首版发布!2023年AlibabaJava中高级架构师面试手册(对标P5-P8)
2023年AlibabaJava中高级架构师面试手册(对标P5-P8) 一年一度的金九银十面试招聘季已经到来,最近好多粉丝后台私信凯撒想要我整理一份最新的Java面试手册,我去各大程序员网站搜罗了这一份2023年AlibabaJava中高级架构师面试手册(对标P5-P8)