微服务平滑迁移上云最佳实践

本文涉及的产品
服务治理 MSE Sentinel/OpenSergo,Agent数量 不受限
简介: 本文章内容将从三个方面的内容进行讲解,微服务平滑迁移上云服务。1、明白微服务上云给企业带来的价值2、了解微服务迁移过程中带来的挑战3、掌握通过MSE提供的迁移方案平滑上云

观看直播回放:https://developer.aliyun.com/live/250412


背景

许多企业在做微服务架构改造的时候,在自建还是上云的选择上难以决策,选择上云后,在微服务上云过程中,如何能够做到不影响业务情况下平滑迁移呢,通过阅读本文,你可以快速获得以下知识点和能力:

1、明白微服务上云给企业带来的价值

2、了解微服务迁移过程中带来的挑战

3、掌握通过MSE提供的迁移方案平滑上云


微服务迁移上云背景

自建微服务平台面临的问题

在早期的时候,由于平台型PaaS设施服务还不够完善,有不少企业的微服务平台是自建的,我们今天一起看下,这些企业在运维自建微服务组建过程中,遇到哪些比较典型的问题:

image.png

这张图是一个典型的微服务架构,主要包含接入层和微服务中心两块,终端的HTTP请求进入到接入层,这层采用一定的分配算法将网络请求分发到后端的多个服务器,后端的服务器组成了一个微服务中心,里面部署着大量业务机器和注册配置中心等微服务组件,这些组件基本采用的都是开源组件:

  • 微服务组件复杂度高,维护难
  • 网关和注册配置中心是微服务架构中核心的组件,要保证高性能,高可用稳定的设计,必然导致组件的复杂度提升,同时部署结构要保证多级容灾,这也加大了整体的维护难度。
  • 自建组件无专业运维,线上稳定性无法保障
  • 线上出现问题时,需要能够熟悉组件设计的专业运维同学参与排查,否则难以快速找到问题,导致故障恢复时间延长。
  • 开源自建组件功能缺失,问题反馈周期长,无法满足企业需求
  • 采用开源的组件,出现问题,往往缺少专职维护跟进,凭借社区的志愿者热情,一些紧急问题很难得到及时反馈。
  • 互联网的流量难以预知,无法准确做容量评估
  • 自建组件在面临极端流量时,如果准备大量机器应对,峰值过后又是一笔浪费,无法做到资源的高效利用。

MSE提供一站式微服务平台

针对上面这些问题,MSE 提供了一站式的微服务平台,集成了微服务里面常用核心的组件,统一构建运维:

image.png

  • 托管易用免运维
  • 提供白屏化监控告警、容灾、宕机重启、扩缩容等能力,减少运维成本,有技术兜底,让客户专注于业务开发本身。
  • 高性能高可用
  • MSE 基于开源在性能和稳定性上做了大量优化,大规模服务数据下 SLA 99.95%。
  • 安全防护
  • 网关支持多种服务来源,丰富的路由策略和认证鉴权方式,可对不同架构、多个业务域的服务调用进行统一的配置、管理和保护。
  • 无厂商绑定
  • 100%兼容开源,代码无需更改,实例无需停机即可平滑迁移。


企业上云案例

MSE 服务了大量的微服务架构企业,这里给大家介绍两个典型的标杆客户,他们通过MSE解决了一些在它们领域里面遇到的微服务问题,大家可以看看是否有值得借鉴的地方。

互联网金融-上海费芮

上海费芮是一家提供专业互联网金融服务的企业,提供专业的在使用MSE之前,他们是自己部署的Nginx Ingress作为流量网关的,面临以下问题:

  • 网关运维能力不足,缺乏专业的网关运维人员
  • 原生的Ningx Ingress部署在用户集群里面,稳定性和安全容易受业务影响
  • 原生的Ningx Ingress的功能有限,例如缺少TLS版本设置,IP黑名单等

在迁移到MSE 云原生网关后,这些问题都得到了解决,在整个迁移过程中,改动成本也非常低,MSE 云原生网关完全兼容Nginx Ingress注解,无需二次编辑路由规则,MSE 提供了网关的全托管服务,将网关与业务集群分离,大幅度提高了稳定性,安全性。


image.png

零售行业-斯凯奇

斯凯奇是零售行业里非常有名的鞋类品牌,它的架构就是典型的微服务架构,接入层已经迁入了MSE 云原生网关,微服务中心采用的是Dubbo+MSE Nacos,配置中心采用的也是MSE Nacos。

MSE 给斯凯奇提供了统一的微服务路由、流控、安全管理,丰富的可观测等能力,方便内外部多系统间的集成,极大提高了中台服务的开发效率,并降低运维成本,顺利应对双11流量洪峰,支撑斯凯奇双11业绩超12亿的交易系统。

image.png

迁移上云常见问题

MSE 支持了许多企业把微服务平台迁移上云,在这个过程中,遇到了不少的问题,主要分为以下几点:

  • 云上云下数据不一致
  • 自建网关里面有大量的路由配置,微服务里面注册中心和配置中心里面存储着大量的地址信息和配置信息,这些都是微服务运行时必不可少的,这些数据在云上都是没有的。
  • 迁移操作过程复杂,如何切流才能业务不中断
  • 迁移过程必然存在云上云下组件同时工作的情况,流量如何无损的从云下切到云上呢,如果出现问题是否能够快速回切止损呢。
  • 微服务组件兼容问题,客户端需要改动
  • 云下和云上是否存在兼容问题,MSE 能否兼容自建Eureka,客户端是否需要做代码层面的改动等。

image.png

MSE 平滑迁移方案

针对迁移过程中遇到的常见问题,MSE 提供了一套迁移工具:MSE Sync,并给出了完整的迁移方案,主要包括注册配置中心及网关的迁移。在实践操作过程中,一般会先从注册配置中心进行迁移,然后再做接入层的迁移,接下来,给大家介绍下每个模块的具体迁移方案。

注册配置中心平滑迁移

MSE Sync可以平滑的把云下的注册配置中心迁移到云上,它主要提供了以下的能力:

  • 支持双向实时同步
  • 同一个服务可以从云下同步到云上,也能从云上同步到云下,支持两边同时操作一个服务不出现冲突。
  • 部署操作简单,一键生成同步配置
  • MSE Sync的同步配置,通过控制台上云迁移功能一键生成,默认同步全量服务,无需额外编辑配置。
  • 支持客户端灰度切换,不中断业务
  • Provider和Consumer无需按序切换,无需全量同时切换,可任意节点灰度切换,进而保持业务的连续性。
  • 支持多种异构/同类型注册配置中心迁移
  • 支持Eureka/Nacos/ZooKeeper常用注册配置中心迁移到MSE,兼容原生客户端无需修改API。

MSE Sync的同步原理,是通过模拟客户端对需要同步的数据进行实时监听,当数据发生变化之后,把对应的数据发布到目标集群中,同时也解决了环同步的问题,支持双向同步。通过MSE Sync将云上云下集群数据保持同步,从而实现了客户端可以任意切换迁移的目的,对于业务来讲,就当作一次正常的发布即可。

image.png

云原生网关 MSE Ingress平滑迁移

从 Nginx Ingress 迁移到 MSE 云原生网关的过程中,为帮助用户了解各迁移阶段,我们梳理了各个阶段的简要说明,且考虑到在用户迁移后能仍然能够复用已有的SLB,降低迁移成本,MSE 云原生网关也提供了“SLB迁移”功能,让用户能够方便的将流量分进程迁移到 MSE 云原生网关。

  • 支持自动监听路由配置
  • 在网关实例创建成功后会监听目标 K8s 集群的Ingress 资源,自动完成 Nginx Ingress Annotation 的转换
  • 支持权重切流,可灰度可回滚
  • MSE 云原生网关控制台中逐步增大权重值直至100即可完成最终的切流
  • 应用侧无需做任何修改
  • 迁移过程应用侧无需做代码层面修改即可完成配置和流量的迁移

迁移阶段总览

image.png

从上图中可以看到,虽然迁移分成了5个阶段,但真正在“迁移”阶段,用户只需要执行一步操作即可完成 Nginx Ingress 配置到 MSE 云原生网关的迁移,非常简便快捷

迁移分解

从 Nginx Ingress 迁移到 MSE 云原生网关的具体流程图如下:

image.png

MSE Sync上云迁移实践

我们通过一个具体的迁移案例,让大家更有体感的感受整个迁移过程,案例的场景是 Dubbo+ZooKeeper部署的一个微服务应用,连的是自建ZooKeeper,通过MSE Sync进行服务数据的迁移,最终把Provider/Consumer切换连到MSE Zookeeper,整个迁移期间保持服务不中断。

image.png

操作步骤

步骤 1 : 规格评估

迁移之前,需要先购买MSE ZooKeeper,MSE提供了规格评估的功能,通过输入节点数或者自建配置,MSE 会生成一个建议的配置给到你。

image.png

步骤 2 : 下载启动MSE Sync

MSE Sync支持2种部署模式,一种是通过容器部署,一种是通过tar包部署,并制作了详细的Step By Step的操作流程,点击“迁移配置”,你可以跟着上面的步骤进行操作。

image.png

步骤 3 : 生成一份Sync迁移配置

部署完了MSE Sync后,需要生成一份Sync配置,主要作用是告诉MSE Sync 要同步的源和目标集群,目标集群需要提前购买好,在创建配置的步骤里面,可以自动下拉选择。这里需要注意一点,就是MSE Sync 部署的机器,网络需要能同时与源/目标集群连通。

image.png

点击下一步,会自动生成一份YAML格式的配置,默认配置会同步所有的Dubbo/Spring Cloud服务,并且是双向同步的:

clusters:
  - clusterName: mse-cn-7pp2wvnwl01
    connectKeyList:
      - mse-xxxxx-p.zk.mse.aliyuncs.com:2181
    clusterType: ZK
  - clusterName: zk_source
    connectKeyList:
      - 127.0.0.1:2181
    clusterType: ZK
    namespace: ''
tasks:
  - source: zk_source
    destination: mse-cn-7pp2wvnwl01

步骤 4 : 导入Sync迁移配置完成同步

将上一步的配置, 导入到MSE Sync,提供了两种导入方式:

image.png

按照你的喜好选择,导入配置是动态生效的,也就是,执行完导入之后,立刻会进行数据的同步,无需重启进程。

步骤 5 : 修改Endpoint重启完成迁移

最后一步,数据同步完了之后,修改Consumer/Provider的Endpoint,把自建的ZooKeeper地址,改成MSE ZooKeeper地址,重启客户端即可完成迁移,重启的顺序和数量没有要求,当作一次正常的配置修改发布即可。

以上案例的操作大概10分钟即可完成,非常的便捷快速,有兴趣的同学可以跟着操作一下,如果有一些定制的迁移需求,例如需要单向同步,同步非Dubbo/Spring Cloud服务等,MSE Sync提供了一些常用的参数进行配置,详细可见 MSE 的官方文档:《MSE Sync简介和部署》

运营活动

重磅推出MSE 专业版,更具性价比,可直接从基础版一键平滑升级到专业版!

image.png

image.png

如有产品上的疑问请加入钉群:34754806,可提供产品答疑服务

image.png

相关实践学习
基于MSE实现微服务的全链路灰度
通过本场景的实验操作,您将了解并实现在线业务的微服务全链路灰度能力。
相关文章
|
2月前
|
运维 监控 Go
Go语言微服务实战与最佳实践
【2月更文挑战第14天】本文将深入探讨使用Go语言进行微服务实战中的最佳实践,包括服务拆分、API设计、并发处理、错误处理、服务治理与监控等方面。通过实际案例和详细步骤,我们将分享如何在Go语言环境中构建高效、稳定、可扩展的微服务系统。
|
6月前
|
数据管理 测试技术 API
如何从单体架构迁移到微服务架构:挑战和最佳实践
如何从单体架构迁移到微服务架构:挑战和最佳实践
124 0
|
1天前
|
监控 持续交付 Docker
使用Docker进行微服务架构的最佳实践
【5月更文挑战第10天】本文探讨了使用Docker实施微服务架构的最佳实践。首先,理解微服务架构是拆分小型独立服务的模式,借助Docker实现快速部署、高可移植性和环境一致性。Docker的优势在于服务扩展、容器编排、自动化构建与部署。最佳实践包括:定义清晰服务边界,使用Dockerfile和Docker Compose自动化构建,利用Docker Swarm或Kubernetes编排,实施服务发现和负载均衡,监控与日志记录,以及持续集成和持续部署。Docker虽重要,但需与其他技术结合以确保系统整体稳定性。
|
5天前
|
消息中间件 数据管理 持续交付
构建高效微服务架构的最佳实践
【5月更文挑战第6天】在动态和快速演变的现代软件开发领域,微服务架构已经成为促进敏捷开发和部署的关键模式。本文将深入探讨构建和维护高效微服务架构的策略,包括服务划分准则、通信机制、数据管理及持续集成与持续交付(CI/CD)的实施。通过分析不同业务场景下的应用案例,本文旨在为开发者提供一套行之有效的指导原则和实践方法,以支持他们构建可扩展、灵活且高效的微服务系统。
28 2
|
11天前
|
消息中间件 数据库 开发者
构建高效微服务架构:后端开发的最佳实践
【4月更文挑战第30天】在现代软件开发中,微服务架构已成为一种流行且有效的方法,它能够提高系统的可扩展性、弹性和维护性。本文将探讨后端开发中构建微服务架构的关键要素,包括服务划分、通信机制、数据一致性和容错处理。通过深入分析这些要素,我们将提供一系列最佳实践,帮助开发者构建一个高性能、可维护的微服务系统。
|
13天前
|
消息中间件 监控 微服务
【专栏】随着技术发展,未来将探索服务网格、容器化和云原生技术,以提升微服务架构的效能
【4月更文挑战第27天】本文探讨了构建高效微服务架构的后端开发最佳实践。微服务以服务独立、去中心化、自治和轻量级通信为核心原则,带来可扩展性、独立性、技术灵活性和团队协作优势。实践中,要注意服务拆分粒度、选择合适的通信协议(如RESTful、RPC、消息队列)、处理数据一致性与分布式事务、实施服务治理和监控,以及确保安全性与权限控制。随着技术发展,未来将探索服务网格、容器化和云原生技术,以提升微服务架构的效能。
|
15天前
|
监控 测试技术 持续交付
探索现代微服务架构的最佳实践
【4月更文挑战第25天】 随着软件开发领域不断演进,微服务架构已成为设计灵活、可扩展且高度可维护系统的首选方案。本文将深入探讨构建和部署微服务时的关键最佳实践,涵盖从服务划分原则到持续集成/持续部署(CI/CD)的流程,再到监控与日志记录的策略。我们的目标是为开发者提供一套实用的指南,帮助他们在构建未来的应用程序时做出明智的架构选择,并确保这些系统能够快速响应市场和技术的变化。
|
16天前
|
Kubernetes API 持续交付
构建高效微服务架构:后端开发的最佳实践
【4月更文挑战第25天】 在当今快速演变的技术景观中,微服务架构已成为组织追求敏捷性、可扩展性和技术灵活性的重要策略。本文深入探讨了构建高效微服务架构的关键步骤和最佳实践,涵盖了服务划分原则、容器化部署、API网关设计以及持续集成与交付等方面。通过综合分析,旨在为后端开发人员提供一套实用的指南,帮助他们在面对复杂系统时能够做出明智的决策,并实现高性能、低耦合的服务架构。
|
18天前
|
存储 设计模式 持续交付
构建高效微服务架构的最佳实践
【4月更文挑战第23天】 在当今快速演进的软件开发领域,微服务架构已成为实现敏捷、可扩展和灵活应用的关键方式。本文将深入探讨如何构建一个高效的微服务系统,从选择合适的技术栈到设计模式的应用,再到持续集成与部署的实践。我们将通过具体案例分析和性能优化技巧,为开发者提供一系列可靠的最佳实践指南,帮助团队克服常见的挑战,打造高性能、易于维护的微服务应用。
10 0
|
26天前
|
监控 负载均衡 API
构建高性能微服务架构:后端开发的最佳实践
【4月更文挑战第14天】 在当今快速发展的软件开发领域,微服务架构已成为构建可扩展、灵活且容错的系统的首选方法。本文深入探讨了后端开发人员在设计和维护高性能微服务时需要遵循的一系列最佳实践。我们将从服务划分原则、容器化部署、API网关使用、负载均衡、服务监控与故障恢复等方面展开讨论,并结合实际案例分析如何优化微服务性能及可靠性。通过本文的阅读,读者将获得实施高效微服务架构的实用知识与策略。