「第二部:容器和微服务架构](12) 基于异步消息的通信

简介: 「第二部:容器和微服务架构](12) 基于异步消息的通信

在跨多个微服务及其相关的域模型传播更改时,异步消息传递和事件驱动的通信至关重要。正如前面在讨论microservices和有界上下文(BCs)时所提到的,模型(用户、客户、产品、帐户等)对不同的microservices或BCs可能有不同的含义。这意味着当发生更改时,您需要某种方法来协调不同模型之间的更改。解决方案是基于异步消息传递的最终一致性和事件驱动通信。


使用消息传递时,进程通过异步交换消息进行通信。客户端通过发送消息向服务发出命令或请求。如果服务需要回复,它会向客户端发送另一条消息。由于这是一种基于消息的通信,客户端假定不会立即收到回复,并且可能根本没有响应。消息由头(标识或安全信息等元数据)和正文组成。消息通常通过异步协议(如AMQP)发送。


微服务社区中此类通信的首选基础设施是轻量级消息代理,它不同于SOA中使用的大型代理和编排器。在轻量级消息代理中,基础设施通常是“哑的”,仅充当消息代理,具有简单的实现,如RabbitMQ或云中的可伸缩服务总线(如Azure服务总线)。在这个场景中,大多数“智能”思维仍然存在于生成和消费消息的端点中,也就是在微服务中。


您应该尽量遵循的另一个规则是,在内部服务之间只使用异步消息传递并且只使用从客户端应用程序到前端服务(API网关加上第一级微服务)的同步通信(如HTTP)。


异步消息通信有两种:单接收者消息通信和多接收者消息通信。以下各节提供了有关它们的详细信息。


单接收器消息通信


与单个接收器的基于消息的异步通信意味着存在点对点通信,该点对点通信将消息准确地传递给从通道读取的某个消费者,并且消息仅被处理一次。但也有特殊情况。例如,在尝试从故障中自动恢复的云系统中,可以多次发送同一消息。由于网络或其他故障,客户端必须能够重试发送消息,而服务器必须实现一个等幂操作,以便仅处理一次特定消息。


单接收器基于消息的通信特别适合于从一个微服务向另一个微服务发送异步命令,如图18所示,该图说明了这种方法。

一旦开始发送基于消息的通信(使用命令或事件),就应该避免将基于消息的通信与同步HTTP通信混合使用。

图18 接收异步消息的单个微服务

注意,当命令来自客户端应用程序时,它们可以实现为HTTP同步命令。当您需要更高的可伸缩性或已经在基于消息的业务流程中时,应该使用基于消息的命令。


基于消息的多接收器通信


作为一种更灵活的方法,您可能还希望使用发布/订阅机制,以便来自发件人的通信可用于其他订阅服务器微服务或外部应用程序。因此,它有助于您在发送服务中遵循打开/关闭原则。这样,以后就可以添加额外的订阅者,而无需修改发送者服务。

使用发布/订阅通信时,可能正在使用事件总线/Kafka接口将事件发布到任何订阅服务器。


异步事件驱动通信


当使用异步事件驱动通信时,微服务在其域内发生某些事情时发布集成事件,而另一个微服务需要注意该事件,如产品目录微服务中的价格更改。其他微服务订阅事件,以便它们可以异步接收它们。当这种情况发生时,接收方可能会更新自己的域实体,这可能会导致发布更多的集成事件。这个发布/订阅系统通常通过使用事件总线/Kafka的实现来执行。事件总线/Kafka可以设计为一个抽象或接口,带有订阅或取消订阅事件和发布事件所需的API。事件总线/Kafka还可以具有基于任何进程间和消息传递代理的一个或多个实现,如支持异步通信和发布/订阅模型的消息传递队列或服务总线。

如果系统使用由集成事件驱动的最终一致性,建议最终用户完全清楚地了解此方法。系统不应该使用模拟集成事件的方法,例如来自客户端的信号器或轮询系统。最终用户和业务所有者必须明确地接受系统中的最终一致性,并意识到在许多情况下,业务对这种方法没有任何问题,只要它是明确的。这一点很重要,因为用户可能希望立即看到一些结果,而这可能不会随着最终的一致性而发生。


正如前面在“分布式数据管理的挑战和解决方案”一节中所述,您可以使用集成事件来实现跨多个微服务的业务任务。因此,这些服务之间最终会保持一致。最终一致的事务由一组分布式操作组成。在每个操作中,相关的微服务更新一个域实体并发布另一个集成事件,该事件在同一个端到端业务任务中引发下一个操作。


重要的一点是,您可能希望与订阅同一事件的多个微服务通信。为此,您可以使用基于事件驱动通信的发布/订阅消息传递,如图19所示。这种发布/订阅机制不是microservice体系结构独有的。它类似于DDD中有界上下文的通信方式,或者类似于在命令和查询责任隔离(CQRS)体系结


构模式中将更新从写数据库传播到读数据库的方式。目标是在分布式系统中的多个数据源之间保持最终的一致性。


图19。异步事件驱动消息通信


在异步事件驱动的通信中,一个微服务将事件发布到一个事件总线/Kafka,许多微服务可以订阅它,以获得通知并对其进行操作。您的实现将确定用于事件驱动的、基于消息的通信的协议。AMQP可以帮助实现可靠的排队通信。

使用事件总线/Kafka时,您可能希望使用抽象级别(如事件总线/Kafka接口),该抽象级别基于使用来自消息代理(如RabbitMQ)的API的类中的相关实现,或使用带有主题的服务总线(如Azure服务总线)。或者,您可能希望使用更高级别的服务总线(如NServiceBus、maststrait或Brighter)来表达您的事件总线/Kafka和发布/订阅系统。


关于生产系统消息传递技术的一点注记

可用于实现抽象事件总线/Kafka的消息传递技术处于不同的级别。例如,RabbitMQ(消息传递代理传输)和Azure服务总线等产品的级别低于其他产品,如NServiceBus、mastransit或Brighter,这些产品可以在RabbitMQ和Azure服务总线之上工作。您的选择取决于您的应用程序在应用程序级别上需要多少丰富的功能和开箱即用的可伸缩性。对于只为您的开发环境实现概念验证事件总线/Kafka,正如在eShopOnContainers示例中所做的那样,在Docker容器上运行RabbitMQ之上的简单实现可能就足够了。


但是,对于需要高度可伸缩性的任务关键型系统和生产系统,您可能需要评估Azure服务总线。对于更容易开发分布式应用程序的高级抽象和特性,我们建议您评估其他商业和开源服务总线,如NServiceBus、maststrait和Brighter。当然,您可以在RabbitMQ和Docker等低级技术的基础上构建自己的服务总线特性。但是,对于定制的企业应用程序来说,管道工程的成本可能太高。


弹性地发布到事件总线/Kafka


在跨多个微服务实现事件驱动体系结构时,一个挑战是如何原子地更新原始微服务中的状态,同时以某种方式基于事务将其相关集成事件弹性地发布到事件总线/Kafka中。以下是实现这一目标的几种方法,尽管也可能有其他方法。

  • 使用事务(基于DTC)队列,如MSMQ。(但是,这是一种传统方法。)
  • 使用事务日志挖掘。
  • 使用完整的事件源模式。
  • 使用发件箱模式:事务数据库表作为消息队列,该消息队列将作为创建事件并发布事件的事件创建者组件的基础。

使用异步通信时要考虑的其他主题是消息等幂和消息重复数据消除。本指南后面的“实现微服务(集成事件)之间基于事件的通信”一节将介绍这些主题。


额外资源


相关文章
|
6天前
|
敏捷开发 监控 数据管理
构建高效微服务架构的五大关键策略
【4月更文挑战第20天】在当今软件开发领域,微服务架构已经成为一种流行的设计模式,它允许开发团队以灵活、可扩展的方式构建应用程序。本文将探讨构建高效微服务架构的五大关键策略,包括服务划分、通信机制、数据管理、安全性考虑以及监控与日志。这些策略对于确保系统的可靠性、可维护性和性能至关重要。
|
6天前
|
消息中间件 监控 持续交付
构建高效微服务架构:后端开发的进阶之路
【4月更文挑战第20天】 随着现代软件开发的复杂性日益增加,传统的单体应用已难以满足快速迭代和灵活部署的需求。微服务架构作为一种新兴的分布式系统设计方式,以其独立部署、易于扩展和维护的特点,成为解决这一问题的关键。本文将深入探讨微服务的核心概念、设计原则以及在后端开发实践中如何构建一个高效的微服务架构。我们将从服务划分、通信机制、数据一致性、服务发现与注册等方面入手,提供一系列实用的策略和建议,帮助开发者优化后端系统的性能和可维护性。
|
1天前
|
监控 测试技术 持续交付
探索现代微服务架构的最佳实践
【4月更文挑战第25天】 随着软件开发领域不断演进,微服务架构已成为设计灵活、可扩展且高度可维护系统的首选方案。本文将深入探讨构建和部署微服务时的关键最佳实践,涵盖从服务划分原则到持续集成/持续部署(CI/CD)的流程,再到监控与日志记录的策略。我们的目标是为开发者提供一套实用的指南,帮助他们在构建未来的应用程序时做出明智的架构选择,并确保这些系统能够快速响应市场和技术的变化。
|
1天前
|
消息中间件 持续交付 数据库
构建高效可靠的微服务架构:策略与实践
【4月更文挑战第25天】 随着现代软件开发的复杂性日益增加,传统的单体应用已难以满足快速迭代和灵活部署的需求。本文深入探讨了如何构建一个高效且可靠的微服务架构,包括关键的设计原则、技术选型以及实践中的挑战和应对策略。通过分析多个成功案例,我们总结了一系列最佳实践,并提出了一套可量化的性能优化方法。文章不仅为开发者提供了具体的技术指导,同时也强调了团队协作和持续学习在微服务转型过程中的重要性。
|
2天前
|
持续交付 API 开发者
构建高效微服务架构:后端开发的新范式
【4月更文挑战第24天】 随着现代软件系统的复杂性日益增加,传统的单体应用已难以满足快速迭代与灵活扩展的需求。微服务架构作为一种新兴的软件开发模式,以其服务的细粒度、独立部署和弹性伸缩等优势,正在逐渐成为后端开发的重要趋势。本文将深入探讨微服务架构的设计原则、关键技术以及在实际业务中的应用实践,旨在为后端开发者提供构建和维护高效微服务架构的参考指南。
|
3天前
|
监控 API 持续交付
构建高效微服务架构:后端开发的新趋势
【4月更文挑战第23天】 随着现代软件开发实践的不断演进,微服务架构已经成为企业追求敏捷、可扩展和弹性解决方案的首选。本文深入探讨了如何构建一个高效的微服务架构,涵盖了关键的设计原则、技术选型以及实践建议。通过分析微服务的独立性、分布式特性和容错机制,我们将揭示如何利用容器化、服务网格和API网关等技术手段,来优化后端系统的可维护性和性能。文章旨在为后端开发人员提供一套全面的指南,以应对不断变化的业务需求和技术挑战。
|
8天前
|
机器学习/深度学习 运维 Prometheus
探索微服务架构下的系统监控策略
【4月更文挑战第18天】在当今快速迭代和持续部署盛行的软件工程实践中,微服务架构因其灵活性和可扩展性受到企业青睐。然而,随着服务的细粒度拆分和网络通信的增加,传统的监控手段已不再适用。本文将探讨在微服务环境中实施有效系统监控的策略,包括日志聚合、性能指标收集、分布式追踪以及异常检测等关键技术实践,旨在为读者提供构建稳定、可靠且易于维护的微服务系统的参考指南。
14 0
|
2天前
|
存储 Kubernetes Docker
Kubernetes(K8S)集群管理Docker容器(概念篇)
Kubernetes(K8S)集群管理Docker容器(概念篇)
|
2天前
|
存储 Ubuntu 安全
Docker容器常用命令
Docker容器常用命令
11 1
|
8天前
|
存储 运维 监控
构建高效稳定的Docker容器监控体系
【4月更文挑战第18天】 在现代微服务架构中,Docker容器已成为部署和运行应用的标准环境。随之而来的挑战是如何有效监控这些容器的性能与健康状况,确保系统的稳定性和可靠性。本文将探讨构建一个高效稳定的Docker容器监控体系的关键技术和方法,包括日志管理、性能指标收集以及异常检测机制,旨在为运维人员提供实用的指导和建议。
13 0