阿里资深架构师钟华曰:中台战略思想与架构实战;含内部实施手册

简介: 最近在读一本书,叫做《企业IT架构转型之道:阿里巴巴中台战略思想与架构实战》,在写此文时本书还没有看完,因为担心如果把书全部看完后再来写这篇文章,很多精彩的内容可能已经忘记了,所以中途先写一篇来分享给大家。

网络异常,图片无法展示
|

最近在读一本书,叫做《企业IT架构转型之道:阿里巴巴中台战略思想与架构实战》,在写此文时本书还没有看完,因为担心如果把书全部看完后再来写这篇文章,很多精彩的内容可能已经忘记了,所以中途先写一篇来分享给大家。

企业IT架构转型之道阿里巴巴中台战略思想与架构实战讲述了阿里巴巴的技术发展史,同时也是一部互联网技术架构的实践与发展史。

目录

第一部分引子

第1章阿里巴巴集团中台战略引发的思考

1.1 阿里巴巴共享业务事业部的发展史

1.2 企业信息中心发展的症结

第2章构建业务中台的基共享服务体系

2.1 回归SOA的本质一服务重用

2.2 服务需要不断的业务滋养

2.3 共享服务体系是培育业务创新的土壤

2.4 赋予业务快速创新和试错能力

2.5 为真正发挥大数据威力做好储备

2.6 改变组织阵型会带来组织效能的提升

第二部分共享服务体系搭建

第3章分布式服务框架的选择

3.1 淘宝平台"服务化”历程

3.2 "中心化"与"去中心化"服务框架的对比

3.3 阿里巴巴分布式服务框架HSF

3.4 关于微服务

第4章共享服务中心建设原则

4.1 淘宝的共享服务中心概貌

4.2 什么是服务中心

4.3 服务中心的划分原则

第5章数据拆分实现数据库能力线性扩展

5.1 数据库瓶颈阻碍业务的持续发展

5.2 数据库分库分表的实践

第6章异步化与缓存原则

6.1 业务流程异步化

6.2 数据库事务异步化

6.3 事务与柔性事务

6.4 大促秒杀活动催生缓存技术的高度使用

第7章打造数字化运营能力

7.1业务 服务化带来的问题

7.2 鹰眼平台的架构

7.3 埋点和输出日志

7.4 海量日志分布式处理平台

7.5 日志收集控制

7.6 典型业务场景

第8章打造平台稳定性能力

8.1 限流和降级

8.2 流量调度

8.3 业务开关

8.4 容量压测及评估规划

8.5 全链路压测平台

8.6 业务-致性平台

第9章共享服务中心对内和对外的协作共享

9.1 服务化建设野蛮发展带来的问题

9.2 共享服务平台的建设思路

9.3 共享服务平台与业务方协作

9.4 业务中台与前端应用协作

9.5 业务中台绩效考核

9.6 能力开放是构建生态的基础

第三部分阿里巴巴能力输出与案例

第10章大型央企互联网转型

10.1 项目背景

10.2 项目实施

10.3 客户收益

10.4 笔者感想

10.5 项目后记

第11章时尚行业品牌公司互联网转型

11.1 项目背景

11.2 供应链的改造

11.3 基于SCRM的全渠道整合营销


中台战略

网络异常,图片无法展示
|

阿里巴巴在2003年成立的淘宝事务部,如图一。

2008年,B2C业务火热,阿里巴巴成立天猫,初期叫淘宝商城,当时作为淘宝事业部中的一个部门运营,如图二。

随着B2C业务的不断增加,天猫开始独立,阿里巴巴单独成立了天猫事业部,与淘宝事务部并列,如图三,此时淘宝技术部分同时支持着两大事业部,这种组织架构决定了技术团队肯定会优先满足来自淘宝的业务需求,严重影响了天猫业务的发展。用过天猫和淘宝的人应该都能发现天猫和淘宝这种电商平台都包含了商品、交易、评价、支付、物流等功能。

2009年,共享业务事业部应运而生,主要成员来至淘宝技术团队,在组织架构上单独成为了一个跟淘宝、天猫同样级别的事业部,如图四。集团希望能通过这种方式让技术团队同时支持天猫和淘宝业务,同时对公共的、通用的业务进行沉淀,更合理的利用资源。

但是实际上在当时共享业务事业部是“听命于”天猫和淘宝,共享业务事业部需要同时满足者天猫和淘宝的大量需求,团队成员经常加班加点可能也达不到天猫和淘宝的需求,这样就导致天猫和淘宝的业务部门对共享业务事业部不太满意,同时共享业务事业部的同事也只能有苦说不出。

2010年,团购业务聚划算出现了,聚划算拥有强大的流量吸引能力,所以天猫、淘宝、1688都想对接聚划算平台从而扩大自己的流量,聚划算突然面对这么大的对接需求也是应接不暇,这时集团要求三大电商平台如果要对接聚划算平台,必须通过共享业务事业部!正是有了这个政策,使得共享业务事业部有了一个极强的业务抓手,将原本与三大电商平台话语权的不平衡拉到了一个相对公平的水平。从而奠定了今天大家所看到的共享业务事业部成了阿里巴巴集团业务中的核心业务平台,如下图:

网络异常,图片无法展示
|

上图清晰的描述了阿里巴巴“厚平台,薄应用”的架构形态,而共享业务事业部正是“厚平台”的真实体现,“厚平台”为阿里巴巴各种前端业务提供了最为专业、稳定的业务服务,这就是中台。我们可以发现中台战略并不是一蹴而就,2009年开始建立共享业务事业部时,就已经为中台战略打下了一定的基础,但同时也需要集团的强力支持才能将中台搭建起来,一旦中台成形,就为业务的腾飞打下了坚实的基础。

烟囱式架构

2008年淘宝的技术团队同时支持着淘宝和天猫两大电商平台,同时1688有自己的技术团队,架构如下图:

网络异常,图片无法展示
|

这种架构就是烟囱式架构,每个业务部门和他们对应的业务部门像烟囱一样伫立在那里,并且如果依照这个架构,当企业需要扩展新业务时,就会出现一个新的业务部门以及对应的新的技术部门,也就是多了一个烟囱。那么这种架构到目前为止其实还是有很多企业是这样的,这种架构之所以出现肯定是有它的好处:

  • 企业考虑到业务模式不同,所以独立建设
  • 新的业务团队认为在之前的业务的基础上改造会有太多的技术和业务的历史包袱,还不如重新构建

只是这种架构的缺点要远大于它的优点:

  • 重复功能建设和维护带来重复性的工作和投资。重复建设能给企业减少风险,但是会增加重复的成本。
  • “烟囱式”系统间如果要进行交互,那么协作的成本是高昂的。
  • 不利于业务的沉淀和持续发展。一个烟囱上线后进入到了运维阶段,此时如果需要在此基础上去修改业务到发布业务会需要一段很长的时间。

在互联网时代,更好的整合企业内部资源、降低企业成本、实现各个系统间的交互是必然的。面对这种情况,2004年,业界就已经提出了SOA理念来解决“烟囱式”系统间交互的问题。

SOA

SOA的核心功能点:

  • 面向服务的分布式计算
  • 服务间松散耦合
  • 支持服务的封装
  • 服务注册和自动发现
  • 以服务契约的方式定义服务交互方式

中心化的SOA

很多企业都是通过ESB来实现SOA的,这是一种中心化的SOA。

ESB是企业服务总线,顾名思义,ESB系统能够对企业里的各种各样的服务进行统一管理,ESB的架构很好的屏蔽了服务接口变化给服务消费者带来的影响,是解决不同系统间实现互联互通的很好的架构,如下图:

网络异常,图片无法展示
|

2004年,很多大型软件公司已经发现,越来越多的企业在多年的IT建设过程中,逐渐构建了越来越多的IT系统,这些IT系统都是采用烟囱式系统建设模式而建立的,使得企业内的系统纷繁林立,这些系统有的是购买商用套件,有的是自主研发,有的是找外包公司所开发,最终的结果就是各个系统所采用的技术平台、框架、语言各不相同。所以软件公司就开发出了ESB系统来帮助这些企业解决这些问题。

服务提供方只需在ESB系统上定义好接口以及该接口的访问路径即可,具体谁是这个服务的消费它不需要关心了,并且对于这个服务的修改只需要在ESB中进行一次调整,便实现了对服务接口变化带来影响的隔离。ESB降低了系统间的耦合,更方便、高效的实现了系统的集成,同时在服务负载均衡、服务管控等方面提供了相比“点对点”模式更专业的能力。

ESB提供了诸如对各种技术接口(HTTP、Socket、JMS、JDBC等)的适配接入、数据格式转换、数据剪裁、服务请求路由等功能,目的是让企业客户能基于这些功能提高开发效率,更快的实现项目落地。

所以,ESB的方式成为这一时期的SOA实现的主流,它很好的解决了异构系统之间的交互。

去中心化的SOA

“去中心化的SOA”是由互联网行业带来的,因为在互联网行业中用户群体是整个互联网公众,所以系统架构设计人员首先要解决的是系统扩展性的问题,以更快的进行业务响应、更好的支持业务创新等。

所以“去中心化”除开满足SOA的核心功能点之外,还要避免“中心化”带来的难扩展性问题,以及潜在的“雪崩”影响。

“去中心化的SOA”是一种“点对点”的架构,它没有中心,如下图:

网络异常,图片无法展示
|

那么可能有疑问,SOA的出现是为了解决烟囱式架构所带来的问题,而烟囱式系统之间的调用就是“点对点”的呀,这样不是在倒退吗?在互联网行业,去中心化服务框架是运行在企业内部的,很少出现跨内外网的服务交互,另外服务是以契约先行的方式进行了服务接口功能的约定,在某种程度上很好的保障了服务接口的稳定性,同时去中心化服务框架加上对多版本、负载均衡等功能的支持,从本质上屏蔽掉了之前“点对点”模式下的各种系统不稳定问题。

在“中心化架构”中,整个架构的中心是ESB,所有的服务调用和返回都要经过ESB,这样服务调用者在调用某个服务时多了很多的网络开销,而在“去中心化架构”中则不会出现这个问题。

另外,所有的服务调用都经过ESB,所以ESB进行集群部署是必然的,另外为了保障ESB不会出现问题,部署ESB系统的服务器配置或网络配置也会更好,这使得一旦企业想扩容ESB时,会带来软件和硬件上成本的显著增加。

另外就算ESB系统使用集群部署以保障高可用,但还是可能出现“雪崩”效应,一旦出现“雪崩”就会导致企业中所有服务都不可用

雪崩

我们假设ESB集群中每台服务器最大的并发量为100,假设现在集群中有10台服务器,在日常用户请求量平稳的时候,经过负载均衡后每台服务器平均的并发量为80,但是如果集群中某一台服务器突然出现故障,此时就需要另外9台来承担之前的并发量,那么剩余的9台服务器的并发量就会增加,从而很有可能导致9台中的某一个服务器被压垮,从而导致剩余的8台服务器相继被压垮,这就是“雪崩”。而一旦出现“雪崩”故障,就算你去重启服务器也是很难解决的,因为很有可能服务器刚启动完成就被流量所压垮,所以这个时候你只能禁止外界的流量流入你的系统中,等所有服务器都成功启动后再放流量进来。并且当出现这种情况时,你可能都没有时间去定位问题所在,重新启动好的集群实际上还是在一个“脆弱”的状态。

这就表示“中心化”架构不能很好的解决系统扩展性这个问题,而“去中心化”的架构则会更好,因为就算出现上面这种情况,也不会影响所有服务。所以这就是为什么互联网行业会选择“去中心化”架构。

下面我们介绍阿里巴巴分布式服务框架HSF,等我看完再继续吧...哈哈。

有痛点才有创新,一个技术肯定都是为了解决某个痛点才出现的。


算法篇部分截图一览,直接上目录(内部PPT及实施手册)

网络异常,图片无法展示
|

网络异常,图片无法展示
|

网络异常,图片无法展示
|

机器算法大集合

网络异常,图片无法展示
|

本文就是愿天堂没有BUG给大家分享的内容,大家有收获的话可以分享下,想学习更多的话可以到微信公众号里找我,我等你哦。

相关文章
|
分布式计算 算法 搜索推荐
阿里巴巴内部:2022年全技术栈PPT分享(架构篇+算法篇+大数据)
我只截图不说话,PPT大全,氛围研发篇、算法篇、大数据、Java后端架构!除了大家熟悉的交易、支付场景外,支撑起阿里双十一交易1682亿元的“超级工程”其实包括以下但不限于客服、搜索、推荐、广告、库存、物流、云计算等。 Java核心技术栈:覆盖了JVM、锁、并发、Java反射、Spring原理、微服务、Zookeeper、数据库、数据结构等大量知识点。 大数据:Spark、Hadoop
|
NoSQL PHP Redis
高可用Redis(一):通用命令,数据结构和内部编码,单线程架构
1.通用API 1.1 keys命令和dbsize命令 keys * 遍历所有key keys [pattern] 遍历模式下所有的key dbsize 计算Redis中所有key的总数 例子: 127.
1171 0
|
存储 API 虚拟化
|
Linux
RPi 2B Raspbian SD卡内部架构
/***************************************************************************** * RPi 2B Raspbian SD卡内部架构 * 声明: * 本文主要想了解RPi 2B Raspbian SD卡中文件存放方式。
881 0
|
15天前
|
缓存 负载均衡 JavaScript
探索微服务架构下的API网关模式
【10月更文挑战第37天】在微服务架构的海洋中,API网关犹如一座灯塔,指引着服务的航向。它不仅是客户端请求的集散地,更是后端微服务的守门人。本文将深入探讨API网关的设计哲学、核心功能以及它在微服务生态中扮演的角色,同时通过实际代码示例,揭示如何实现一个高效、可靠的API网关。
|
14天前
|
Cloud Native 安全 数据安全/隐私保护
云原生架构下的微服务治理与挑战####
随着云计算技术的飞速发展,云原生架构以其高效、灵活、可扩展的特性成为现代企业IT架构的首选。本文聚焦于云原生环境下的微服务治理问题,探讨其在促进业务敏捷性的同时所面临的挑战及应对策略。通过分析微服务拆分、服务间通信、故障隔离与恢复等关键环节,本文旨在为读者提供一个关于如何在云原生环境中有效实施微服务治理的全面视角,助力企业在数字化转型的道路上稳健前行。 ####