独家下载 | “伏羲”神算!阿里巴巴经济体核心调度系统揭秘

简介: 阿里巴巴 9 位技术专家为你深度解析阿里巴巴经济体核心调度系统“伏羲”。伏羲(Fuxi)作为十年前最初创立飞天平台时的三大服务之一(分布式存储 Pangu,分布式计算 MaxCompute,分布式调度 Fuxi),十年来,在技术能力上持续演进。本书从面向大数据、云计算的调度挑战出发,介绍伏羲调度系统及各子领域的关键技术进展,并以双11为典型场景进行最佳实践的介绍,为你呈现大数据分布式调度技术的深水区玩法。— 《“伏羲”神算》现在可以免费下载阅读啦,快来先睹为快吧。

点击免费下载
《“伏羲”神算》>>

你也可以复制以下链接到浏览器免费下载:
https://developer.aliyun.com/topic/download?id=873

image.png

伏羲(Fuxi)的设计初衷是为了解决大规模分布式资源的调度问题(本质上是多目标的最优匹配问题)。随阿里经济体和阿里云丰富的业务需求(尤其是双十一)和业务磨练,伏羲的内涵不断扩大,从单一的资源调度器(对标开源系统的 YARN)扩展成大数据的核心调度服务,覆盖数据调度(Data Placement)、资源调度(Resouce Management)、计算调度(Application Manager)、和本地微(自治)调度(即正文中的单机调度)等多个领域,并在每一个细分领域致力于打造超越业界主流的差异化能力。

十年来,伏羲技术能力持续突破,2013 年实现 5K,2015 年Sortbenchmark 世界冠军,2017 年小规模离在/在离线混部能力,2019年 Yugong 发布并且论文被 VLDB 接受等。本书试从面向大数据、云计算的调度挑战出发,介绍各个子领域的关键进展,带你全面了解分布式调度技术及阿里巴巴经济体的最佳实践。

image.png
image.png

相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
相关文章
|
开发者 知识图谱
免费下载!《阿里工程师的自我修养》公开10位阿里大牛解决问题的思维方式
今天,阿里技术公布一波阿里P8、P9技术大牛的思维模型,将他们的思维模式呈现出来。你可以在阿里资深专家职业生涯的真切感悟中,找到应对危机的最佳方法。《阿里工程师的自我修养》现已正式公开,可免费下载阅读。
136480 1
免费下载!《阿里工程师的自我修养》公开10位阿里大牛解决问题的思维方式
|
资源调度 分布式计算 安全
伏羲—阿里云分布式调度系统
在12月12日的云栖社区在线培训上,“飞天”分布式系统核心开发人员陶阳宇分享了《伏羲-阿里云分布式调度系统》。他主要从伏羲系统架构、任务调度、资源调度、容错机制、规模挑战、安全与性能隔离方面介绍了伏羲分布式系统架构和设计理念。
23700 0
|
资源调度 分布式计算 Kubernetes
给 K8s 装上大数据调度引擎:伏羲架构升级 K8s 统一调度
飞天伏羲作为有着十多年历史的调度团队,在服务好 MaxCompute 大数据平台的过程中,一直在不断通过自我革新赶超业界先进水平,我们经历了 Fuxi 2.0 的这样的大规模升级,今天通过 K8s 统一调度项目又再次实现了系统架构的蜕变,将大数据平台强大的调度能力赋予 K8s 系统,同时去拥抱 K8s 周边丰富的生态。除了集团弹内集群,将来我们在公共云、专有云等多个场景,也会以 K8s 统一调度的方式进行输出,以更好地服务云上的用户,敬请期待!
2841 103
给 K8s 装上大数据调度引擎:伏羲架构升级 K8s 统一调度
|
Kubernetes Cloud Native 容器
开放下载!《深入浅出Kubernetes》
一次搞懂6个核心原理吃透基础理论,一次学会6个典型问题的华丽操作
开放下载!《深入浅出Kubernetes》
|
敏捷开发 架构师 Devops
开放下载!《阿里巴巴 DevOps 实践手册》
覆盖 DevOps 演进史、核心理念与阿里巴巴 DevOps 最佳实践的全方位解析手册,揭开阿里巴巴高效研发的秘密!
60569 1
开放下载!《阿里巴巴 DevOps 实践手册》
|
设计模式 运维 Cloud Native
业界首发|阿里云重磅发布云原生架构白皮书
2020 年 7 月 21 日,由阿里云 20+ 位云原生技术专家共同编撰的《云原生架构白皮书》正式对外发布。
24328 9
业界首发|阿里云重磅发布云原生架构白皮书
|
消息中间件 运维 Java
开放下载!《Rocket MQ 使用排查指南》精解100+常见问题
6个要点掌握Rocket MQ原理,5步教程快速入门Rocket MQ ,云运维工程师不可错过的匠心之作
38507 1
开放下载!《Rocket MQ 使用排查指南》精解100+常见问题
|
运维 安全 对象存储
开放下载!《CDN排坑指南》
阿里云工程师多年从业经验,真实案例排坑总结,一书详解CDN经典问题排查要点。
开放下载!《CDN排坑指南》
|
存储 分布式计算 资源调度
Spark on k8s 在阿里云 EMR 的优化实践
本文整理自阿里云技术专家范佚伦在7月17日阿里云数据湖技术专场交流会的分享。
Spark on k8s 在阿里云 EMR 的优化实践
|
运维 监控 数据挖掘
重磅首发 |《Elasticsearch 中国开发者调查报告》探索开发者的现状和未来
为了了解Elasticsearch 中国开发者群体,结合1186位开发者的调研数据和18位社区专家的深度访谈,Elastic 技术社区、阿里巴巴 Elasticsearch 技术团队和阿里云开发者社区联合发布了《Elasticsearch 中国开发者调查报告》。免费下载,抢先一步读懂这个“族群”吧。
84978 0
重磅首发 |《Elasticsearch 中国开发者调查报告》探索开发者的现状和未来