微服务和 Serverless 架构-阿里微服务架构演进

本文涉及的产品
注册配置 MSE Nacos/ZooKeeper,182元/月
可观测监控 Prometheus 版,每月50GB免费额度
云原生网关 MSE Higress,422元/月
简介: 微服务和 Serverless 架构-阿里微服务架构演进

开发者学习笔记【阿里云云原生助理工程师认证(ACA)课程:微服务和 Serverless 架构-阿里微服务架构演进】

课程地址:https://edu.aliyun.com/course/3112075/lesson/19025


微服务和 Serverless 架构-阿里微服务架构演进

 

课程目录

一、早期阿里的技术架构

二、淘宝基于新框架的服务化改造

三、Spring Cloud Alibaba全家桶形成微服务领域最佳实践

四、基于RocketMQ的消息产品家族

五、阿里前端全面拥抱云原生Serverless

六、微服务架构并发数技术指标与日俱增

 

一、早期阿里的技术架构

image.png

阿里巴巴的微服务架构之路,起点于2007年,在2007年前的一段时间里,阿里巴巴的淘宝业务经历了一个快速发展的阶段,在这个时间段,淘宝业务经历了之前的沉淀和打磨,达到了快速爆发的临界点。应用的活用用户量没几个月就以翻番的速度增长,相对应的功能需求的迭代速度也变得越来越快。

为了支撑业务的快速增长,及时响应功能需求的变化,淘宝技术团队的人员也随之进行了快速的增长。在2007年十月份左右,淘宝业务的技术人员团队已经达到了500人左右,内部的功能模块也达到了200多个,而当时淘宝所采用的软件架构仍然是基于传统1JB模式的单War应用,后端连接Oracle数据集群,在这种架构下团队之间的沟通成本不断升高,源代码冲突、版本冲突等问题出现的频率也越来越高。

同时,为了支持不断增长的流量,需要为应用不断增加服务器数量,这就导致了数据库连接的数量很快达到Oracle数据集群的上限。Oracle数据集群服务器的CPU占用率常年在百分之九十以上,这种由集中式架构带来的数据库压力使得系统存在严重的健康性风险。

另外,由于业务的快速迭代和不断修改,200多个业务模块之间的耦合度已经达到了难以梳理的程度,模块之间的过多依赖,以及公有资源之间的互相竞争,使得一个旧有业务代码的小修改,往往会引起其他代码出现意想不到的情况。而在当时,业界还没有微服务的概念,对于阿里巴巴这种体量的互联网应用,市面上也没有成熟的经验和模式可以借鉴。
但是,为了能够经历千辛万苦打磨出来的业务,能够持续、健康、快速的发展,阿里巴巴还是决定展开服务化架构的尝试与调整。

 

二、淘宝基于新框架的服务化改造

image.png

在服务化改造的过程中,淘宝团队经过谨慎的技术评估之后,决定先将数据复用率最高的用户操作部分进行拆分通过功能的梳理剥离出用户中心这样一个共享的服务层,不同于传统的集中式应用模式,由独立的团队进行运营使用单独的数据存储服务并且单独进行部署,这样就避免了单War、单数据库的各种弊端。

经过一段时间,用户功能中心开发完毕并测试稳定之后,淘宝团队将上层应用中所有用户业务相关的调用全部切换到了用户中心服务层的远程调用上,在经过一段时间的稳定和积累经验之后,新架构的用户中心服务层已经可以完全替代旧有的业务模块,同时实现了业务的服务不停机,被阿里人细称为给飞行中的飞机换发动机。

接下来,阿里巴巴启动了千岛湖项目,将更为核心的交易类和类目操作分离出来,组建了交易中心和类目中心。并且在之后的五彩石项目中继续提炼了店铺中心、商品中心、评价中心等一系列共享服务,初步完成了整个淘宝体系的服务化架构拆分。

经过近十年的服务化架构演进,目前阿里巴巴的服务中心总数量已经达到了五十多个,每个中心都有独立的团队进行专业维护,可以根据每个服务中心所承载的负载规模,单独进行记载资源和服务技术水平的扩展,有利的支撑了业务技术部门的海量用户量和快速迭代开发需求。

 

三、Spring Cloud Alibaba 全家桶形成微服务领域最佳实践

image.png
自从2011年Dubbo开源之后,阿里微服务团队就一直在内部产品的开源方面进行努力的探索,希望能够把阿里巴巴在微服务和应用托管体系的实践经验分享给用户,让支持阿里巴巴核心业务的微服务系统从封闭走向开放,服务更广泛的用户。
其中Spring Cloud阿里巴巴项目的推出,无疑是阿里巴巴在微服务领域中最具有代表性的贡献之一。
Spring Cloud是公司提出的基于Spring Bot用于开发微分布式应用的一款开源项目,其内部定义了微服务分布式开发的常用组件。如服务注册发现、服务熔断、分布式配置、服务调用、服务路由、分布式消息、消息总线等组件的接口规范。

2016年阿里开始全面拥抱Spring Bot,并将阿里原有的自研的诸多微服务中间件产品于Spring Bot开始进行整合,形成了基于阿里中间件的服务符合Spring Cloud规范的开源实现版本,也就是Spring Cloud阿里巴巴项目。
2017年12月Spring Cloud阿里巴巴顺利进入Spring Cloud孵化器,再次期间阿里巴巴再次提供了符合Spring Cloud微服务和应用组件。
2019年7月14日Spring官方宣布 Spring Cloud阿里巴巴项目正式毕业,这就意味着Spring Cloud阿里巴巴是国内首个进入Spring社区的开源项目,得到了广大开发者的广泛认可。

这里列举了Spring Cloud阿里巴巴项目的主要组件,其中包括服务注册发现、配置中心Nacos、RPC调用Dubbo、消息驱动RocketMQ、分布式事务Seata、在线调试Arthas、限流&熔断Sentinel、混沌测试ChaosBlade、消息队列RocketMQ。
同时Spring Cloud阿里巴巴还实现了很多对阿里云商业组件的集成,在用户上云并进行云原生改造中具有强大的先天优势。

 

四、基于 RocketMQ 的消息产品家族

image.png

从2007年阿里采用五彩石项目开始,淘宝原有的单体服务架构逐步被拆分成了包含用户中心、商品中心、交易中心、评价中心等50多个应用中心的平台型应用架构。而这时候系统和系统之间的交互就变的非常的重要,于是阿里中间件团队在2007年开发了第一代自研中间件Notify,用于淘宝业务中系统和系统之间的义务调用消息流转。紧接着在2010年阿里团队开始大规模使用ActiveMQ,并打造了自己的消息引擎Napoli,但是无论是Notify还是Napoli,在阿里巴巴不断增加的业务之下,都会出现由于消息数量过大处理不及时导致的消息堆积问题。

于是阿里巴巴综合之前的消息队列产品的优势,并结合阿里巴巴自身的技术特点和要求,开发了支持严格收取数据消息和海量消息堆积的新一代消息队列产品MetaQ,并在2012年升级为RocketMQ。此后RocketMQ就一直承载着阿里巴巴核心链路的消息流转,历经多年双11万亿级消息洪峰的严苛考验,创造了国内乃至世界上最大的消息流转记录,到今天阿里巴巴线上所有消息全部通过RocketMQ进行转发投递,同时支撑了全集团3000多个业务,为复杂业务场景提供了填补的能力。保证了系统核心业务的低延迟高吞吐,为阿里巴巴的大中台和服务化架构的稳定发挥着举足轻重的作用。

2012年RocketMQ正式进行了开源,阿里巴巴的消息中间件走入了公众的视野。
2016年11月28日,阿里巴巴宣布将开源分布式消息中间件产品RocketMQ捐赠给Apache成为孵化项目,孵化成功后RocketMQ成为国内首个互联网中间件,在Apache上的顶级项目,成为全球继ApacheMQ卡夫卡之后分布式消息引擎架构中的新成员。

 

五、阿里前端全面拥抱云原生 Serverless

image.png2020年双11阿里巴巴集团的前端应用,全面拥抱云原生Serverless,淘系、飞猪、淘宝、CPU、ICPU、优酷、考拉等十数个BU共同落地了以Node.js为平台Faas在线服务架构为核心的云端一体研发模式,在保障稳定性,高资源利用率的前提下多个BU的重点营销场景全面实现了研发模式的升级。通过采用前端Faas支撑的云端一体研发模式,交付平均效率提高了38.89%。

同时依托Serverless的便利性和可靠性,淘宝、天猫、飞猪等双11会场页面,全面快捷落地了SSR技术,提高了用户的界面体验。除了保障大促以外,日常弹性下也较以往减少了30%的计算成本。
另外在个性化业务推荐场景下数以千计的易购应用运营成本一直是这个场景下的运营痛点。
而Serverless天生的弹性伸缩能力正式个性化推荐业务最为理想的技术支撑。通过Serverless化进一步解放运维负担,让开发者专注于业务的算法创新。

目前这个场景的应用范围越来越大,已经覆盖了几乎整个阿里系列APP,如淘宝、天猫、支付宝、优酷、飞猪等等。而推荐业务的大大接入又可以推动底层业务开发人员对机器利用效率方面做更多地优化。
通过智能化调动在峰值时期及其利用率已经可以达到60%。总体来说Serverless成绩单非常显眼,在双11大促中,不单承担了部分核心业务,流量也突破新高,帮助业务部门抗住了百万QBS的流量洪峰。

 

六、微服务架构并发数技术指标与日俱增

image.png

随着软件架构的不断演进,阿里巴巴的底层技术架构和业务能力也有了突飞猛进的提高,以双11峰值交易额为例,从2009年的400笔每秒进化成了2020年的58300笔每秒,11年间增长了将近1500倍,可以说云计算服务化Serverless消息队列云原生为代表的不断演进的技术架构,为今天阿里巴巴如此巨大的业务规模打下了坚实的技术基础。

以上就是阿里巴巴十多年来技术演进历程中一些重要的技术和节点的讲解。

相关实践学习
【AI破次元壁合照】少年白马醉春风,函数计算一键部署AI绘画平台
本次实验基于阿里云函数计算产品能力开发AI绘画平台,可让您实现“破次元壁”与角色合照,为角色换背景效果,用AI绘图技术绘出属于自己的少年江湖。
从 0 入门函数计算
在函数计算的架构中,开发者只需要编写业务代码,并监控业务运行情况就可以了。这将开发者从繁重的运维工作中解放出来,将精力投入到更有意义的开发任务上。
相关文章
|
1月前
|
Cloud Native Serverless API
微服务架构实战指南:从单体应用到云原生的蜕变之路
🌟蒋星熠Jaxonic,代码为舟的星际旅人。深耕微服务架构,擅以DDD拆分服务、构建高可用通信与治理体系。分享从单体到云原生的实战经验,探索技术演进的无限可能。
微服务架构实战指南:从单体应用到云原生的蜕变之路
|
7月前
|
存储 运维 Serverless
千万级数据秒级响应!碧桂园基于 EMR Serverless StarRocks 升级存算分离架构实践
碧桂园服务通过引入 EMR Serverless StarRocks 存算分离架构,解决了海量数据处理中的资源利用率低、并发能力不足等问题,显著降低了硬件和运维成本。实时查询性能提升8倍,查询出错率减少30倍,集群数据 SLA 达99.99%。此次技术升级不仅优化了用户体验,还结合AI打造了“一看”和“—问”智能场景助力精准决策与风险预测。
699 69
|
4月前
|
缓存 Cloud Native Java
Java 面试微服务架构与云原生技术实操内容及核心考点梳理 Java 面试
本内容涵盖Java面试核心技术实操,包括微服务架构(Spring Cloud Alibaba)、响应式编程(WebFlux)、容器化(Docker+K8s)、函数式编程、多级缓存、分库分表、链路追踪(Skywalking)等大厂高频考点,助你系统提升面试能力。
249 0
|
8月前
|
监控 Java Nacos
阿里二面:10亿级分库分表,如何丝滑扩容、如何双写灰度?阿里P8方案+ 架构图,看完直接上offer!
阿里二面:10亿级分库分表,如何丝滑扩容、如何双写灰度?阿里P8方案+ 架构图,看完直接上offer!
阿里二面:10亿级分库分表,如何丝滑扩容、如何双写灰度?阿里P8方案+ 架构图,看完直接上offer!
|
6月前
|
数据采集 运维 监控
Serverless爬虫架构揭秘:动态IP、冷启动与成本优化
随着互联网数据采集需求的增长,传统爬虫架构因固定IP易封禁、资源浪费及扩展性差等问题逐渐显现。本文提出基于Serverless与代理IP技术的新一代爬虫方案,通过动态轮换IP、弹性调度任务等特性,显著提升启动效率、降低成本并增强并发能力。架构图与代码示例详细展示了其工作原理,性能对比数据显示采集成功率从71%提升至92%。行业案例表明,该方案在电商情报与价格对比平台中效果显著,未来有望成为主流趋势。
220 0
Serverless爬虫架构揭秘:动态IP、冷启动与成本优化
|
7月前
|
存储 NoSQL Redis
阿里面试:Redis 为啥那么快?怎么实现的100W并发?说出了6大架构,面试官跪地: 纯内存 + 尖端结构 + 无锁架构 + EDA架构 + 异步日志 + 集群架构
阿里面试:Redis 为啥那么快?怎么实现的100W并发?说出了6大架构,面试官跪地: 纯内存 + 尖端结构 + 无锁架构 + EDA架构 + 异步日志 + 集群架构
阿里面试:Redis 为啥那么快?怎么实现的100W并发?说出了6大架构,面试官跪地: 纯内存 + 尖端结构 +  无锁架构 +  EDA架构  + 异步日志 + 集群架构
|
7月前
|
Cloud Native Serverless 流计算
云原生时代的应用架构演进:从微服务到 Serverless 的阿里云实践
云原生技术正重塑企业数字化转型路径。阿里云作为亚太领先云服务商,提供完整云原生产品矩阵:容器服务ACK优化启动速度与镜像分发效率;MSE微服务引擎保障高可用性;ASM服务网格降低资源消耗;函数计算FC突破冷启动瓶颈;SAE重新定义PaaS边界;PolarDB数据库实现存储计算分离;DataWorks简化数据湖构建;Flink实时计算助力风控系统。这些技术已在多行业落地,推动效率提升与商业模式创新,助力企业在数字化浪潮中占据先机。
444 12
|
9月前
|
Kubernetes 监控 Serverless
基于阿里云Serverless Kubernetes(ASK)的无服务器架构设计与实践
无服务器架构(Serverless Architecture)在云原生技术中备受关注,开发者只需专注于业务逻辑,无需管理服务器。阿里云Serverless Kubernetes(ASK)是基于Kubernetes的托管服务,提供极致弹性和按需付费能力。本文深入探讨如何使用ASK设计和实现无服务器架构,涵盖事件驱动、自动扩展、无状态设计、监控与日志及成本优化等方面,并通过图片处理服务案例展示具体实践,帮助构建高效可靠的无服务器应用。
|
8月前
|
存储 消息中间件 人工智能
基于 Apache RocketMQ 的 ApsaraMQ Serverless 架构升级
基于 Apache RocketMQ 的 ApsaraMQ Serverless 架构升级
192 0

相关产品

  • 函数计算