微服务的进程间通信(IPC)

简介: 微服务的进程间通信(IPC)

目录

本文介绍了几种典型的微服务间通信方式,并提供了几种相应的实现方式。

译自:Microservice IPC

微服务的进程间通信架构图:

术语

IPC:进程间通信

MSA:微服务架构

概述

服务间通信包含两大类:

  • 基于同步请求/响应的通信,如REST,gRPC
  • 基于异步消息的通信,如AMQP或STOMP

通信视角

视角 #1

  • 一对一通信
  • 一对多通信

视角 #2

  • 同步通信
  • 异步通信

一对一通信类型

  • 请求/响应通信
  • 异步请求响应
  • 单方面通知

一对多通信类型

  • 发布/订阅
  • 发布/异步响应

APIs

服务API是服务端和客户端之间的合约。

  • 理想情况下,首先应该定义服务的接口,然后再实现服务

服务APIs使用版本语法来命名APIs的版本。版本语法包含三个部分:MAJOR.MINOR.PATCH。

消息格式

IPC的本质是消息的交互。消息有两种格式:文本格式和二进制格式。

  • 文本格式:JSON,XML
  • 二进制格式:Avro,Protobuf和Thrift

在实现时必须注意消息格式的跨语言协作,因此不推荐使用JavaSerializer。

RPC

远程调用服务的方法,但对调用者来说,就像使用本地方法一样。

流程:

  • 客户端的业务逻辑调用RPI代理接口
  • RPI代理通过网络调用RPI服务,即调用服务端的业务逻辑
  • 服务端将结果返回给RPI代理,最终由RPI代理返回给客户端的业务逻辑。

REST

REST是一种理念,而非协议。REST用到了HTTP。

REST的一个主要理念是资源,它代表一个单独的业务实体,如Movie,Customer等,或一个对象集合。

REST使用HTTP verb来操作资源,如:

  • POST /movies : Create a movie
  • PUT /movies : Update a movie
  • GET /movies : Get all movies
  • GET /movies/{movieId} : Get a movie

gRPC

gRPC是一个基于二进制的消息协议,因此必须优先处理API(定义API)。首先使用IDL定义接口,然后编译生成期望语言的客户端和服务端stubs。

断路器

是一个RPI代理,用于在连续发送的错误超过一定阈值时,在一定时间内拒绝调用。

常用的断路器库如下:

  • Netflix Hystrix ( Java )
  • Polly ( .Net )
  • Hystrix Go (Go lang)

API通信的健壮性

为了构建同步通信的健壮性,需要考虑如下模式:

  • 网络超时
  • 重试
  • 断路器
  • 回滚
  • 可靠性测试

服务发现

问题

服务A需要通过API调用服务B,因此服务A需要知道服务B的地址。

传统方式

最简单的方式是静态配置实例的网络地址,这样调用者可以在配置文件中指定该地址。

传统方式的问题

现在,由于在自动扩容、失败和升级时会动态创建服务实例,并为实例动态分配网络位置,因此引出了服务发现的需求。

服务发现

服务发现的概念非常简单,最主要的组件是服务注册表,存储了应用服务实例的网络位置。

服务发现的两种主要实现方式:

  • 服务端和客户端直接与服务注册表交互
  • 通过部署平台(如kubernetes)进行交互

服务发现模式:

  • 自注册
  • 客户端发现
  • 服务端发现

异步消息

基于消息的应用通常会使用一个消息代理(broker),作为服务间的中间人。另一种方式是使用无消息代理架构。

概念

发送端会向一个channel写入消息,接收者会从该channel中读取消息。

消息

消息包含首部和消息体。

首部是一个键值对集合,此外还包含一个唯一消息Id(来自发送端或由消息基础设施生成)。

消息体包含需要发送的数据。

消息类型

  • 文档
  • 目录
  • 事件

Channels

消息通过channel进行交互。channel有两种类型:

  • 点到点channel
  • 发布订阅channel

异步通信实现

异步请求响应

发布订阅

无消息代理

  • 服务可以直接进行交互
  • ZeroMQ就是一个典型的无消息代理技术

基于消息代理的通信

消息代理是所有消息流的中间人。

好处

  • 发送端不需要知道消费端的位置
  • 在消息被消费者处理前,消息代理会对消息进行缓存

典型的开源消息代理

  • ActiveMQ
  • RabbitMQ
  • Apache Kafka

在选择消息代理时需要考虑的因素

  • 支持的编程语言
  • 支持的消息标准
  • 消息顺序
  • 保证消息的发送
  • 持久化
  • 稳定性
  • 可扩展性
  • 延迟
  • 产品竞争力
目录
相关文章
|
13天前
|
消息中间件 Linux API
Linux c/c++之IPC进程间通信
这篇文章详细介绍了Linux下C/C++进程间通信(IPC)的三种主要技术:共享内存、消息队列和信号量,包括它们的编程模型、API函数原型、优势与缺点,并通过示例代码展示了它们的创建、使用和管理方法。
16 0
Linux c/c++之IPC进程间通信
|
20天前
|
消息中间件 存储 网络协议
操作系统的心脏:深入理解进程间通信(IPC)机制
在现代计算机系统中,操作系统扮演着至关重要的角色,而进程间通信(IPC)作为操作系统的核心功能之一,极大地影响着系统的性能和稳定性。本文将通过浅显易懂的语言,详细探讨进程间通信的基本原理、主要类型及其实际应用,旨在为读者提供一个清晰且全面的理解和认识。 ##
58 1
|
1月前
|
消息中间件 安全 Kafka
Python IPC机制全攻略:让进程间通信变得像呼吸一样自然
【9月更文挑战第12天】在编程领域,进程间通信(IPC)是连接独立执行单元的关键技术。Python凭借简洁的语法和丰富的库支持,提供了多种IPC方案。本文将对比探讨Python的IPC机制,包括管道与消息队列、套接字与共享内存。管道适用于简单场景,而消息队列更灵活,适合高并发环境。套接字广泛用于网络通信,共享内存则在本地高效传输数据。通过示例代码展示`multiprocessing.Queue`的使用,帮助读者理解IPC的实际应用。希望本文能让你更熟练地选择和运用IPC机制。
51 10
|
1月前
|
消息中间件 Python
深入理解操作系统的进程间通信(IPC)机制
本文将探讨操作系统中的核心概念——进程间通信(IPC),揭示其在系统运作中的重要性及实现方式。通过分析不同类型的IPC手段,如管道、信号、共享内存等,帮助读者更好地理解操作系统的内部工作原理及其在实际应用中的表现。
57 1
|
1月前
|
安全 开发者 Python
Python IPC大揭秘:解锁进程间通信新姿势,让你的应用无界连接
【9月更文挑战第11天】在编程世界中,进程间通信(IPC)如同一座无形的桥梁,连接不同进程的信息孤岛,使应用无界而广阔。Python凭借其丰富的IPC机制,让开发者轻松实现进程间的无缝交流。本文将揭开Python IPC的神秘面纱,介绍几种关键的IPC技术:管道提供简单的单向数据传输,适合父子进程间通信;队列则是线程和进程安全的数据共享结构,支持多进程访问;共享内存允许快速读写大量数据,需配合锁机制确保一致性;套接字则能实现跨网络的通信,构建分布式系统。掌握这些技术,你的应用将不再受限于单个进程,实现更强大的功能。
60 6
|
1月前
|
Python
惊!Python进程间通信IPC,让你的程序秒变社交达人,信息畅通无阻
【9月更文挑战第13天】在编程的世界中,进程间通信(IPC)如同一场精彩的社交舞会,每个进程通过优雅的IPC机制交换信息,协同工作。本文将带你探索Python中的IPC奥秘,了解它是如何让程序实现无缝信息交流的。IPC如同隐形桥梁,连接各进程,使其跨越边界自由沟通。Python提供了多种IPC机制,如管道、队列、共享内存及套接字,适用于不同场景。通过一个简单的队列示例,我们将展示如何使用`multiprocessing.Queue`实现进程间通信,使程序如同社交达人般高效互动。掌握IPC,让你的程序在编程舞台上大放异彩。
20 3
|
1月前
|
消息中间件 Kafka 数据安全/隐私保护
Python IPC实战指南:构建高效稳定的进程间通信桥梁
【9月更文挑战第11天】在软件开发中,随着应用复杂度的提升,进程间通信(IPC)成为构建高效系统的关键。本文通过一个分布式日志处理系统的案例,介绍如何使用Python和套接字实现可靠的IPC。案例涉及定义通信协议、实现日志发送与接收,并提供示例代码。通过本教程,你将学会构建高效的IPC桥梁,并了解如何根据需求选择合适的IPC机制,确保系统的稳定性和安全性。
47 5
|
1月前
|
消息中间件 Unix
操作系统的心脏:深入理解进程间通信(IPC)
在现代计算中,操作系统扮演着至关重要的角色,它不仅管理着硬件资源,还负责协调和优化应用程序之间的交互。本文将深入探讨操作系统中的一个核心概念——进程间通信(IPC),揭示其背后的机制以及在实际应用中的重要性。通过通俗易懂的语言和条理清晰的解释,本文旨在为读者提供一个关于IPC的全面了解,从基本定义到高级应用,带领大家走进操作系统的神秘世界。
|
1月前
|
消息中间件 网络协议 Python
工具人逆袭!掌握Python IPC,让你的进程从此告别单打独斗
【9月更文挑战第9天】你是否曾遇到多个Python程序像孤岛般无法通信,导致数据孤立、任务难协同的问题?掌握进程间通信(IPC)技术,可助你打破这一僵局。IPC是不同进程间传递数据或信号的机制,在Python中常用的方法有管道、消息队列、共享内存及套接字等。其中,管道适用于父子或兄弟进程间简单数据传递;套接字则不仅限于本地,还能在网络间实现复杂的数据交换。通过学习IPC,你将能设计更健壮灵活的系统架构,成为真正的编程高手。
24 3
|
1月前
|
安全 开发者 Python
揭秘Python IPC:进程间的秘密对话,让你的系统编程更上一层楼
【9月更文挑战第8天】在系统编程中,进程间通信(IPC)是实现多进程协作的关键技术。IPC机制如管道、队列、共享内存和套接字,使进程能在独立内存空间中共享信息,提升系统并发性和灵活性。Python提供了丰富的IPC工具,如`multiprocessing.Pipe()`和`multiprocessing.Queue()`,简化了进程间通信的实现。本文将从理论到实践,详细介绍各种IPC机制的特点和应用场景,帮助开发者构建高效、可靠的多进程应用。掌握Python IPC,让系统编程更加得心应手。
29 4