开发者社区> shev> 正文
阿里云
为了无法计算的价值
打开APP
阿里云APP内打开

【干货】全自主研发Docker容器调度引擎——Newbon

简介:
+关注继续查看

背景:

      大家所熟知的Docker容器调度引擎包括,K8S, Swarm, Mesos和Rancher,这些调度引擎都是开源的国外引擎,各有各的特点。在同客户和圈内人士沟通中,很多人直言国内容器创业公司大多只是将各种开源组件集成在一起,同质化严重,没有核心竞争力。作为国内第一批的容器创业公司——Ghostcloud精灵云,深知国内需要在容器的诸多领域拥有真正完全可控,同时具有核心竞争力的产品。因此,容器云平台最核心的调度引擎迫切需要一个完全可控,自主的产品,在这种背景下Newbon应运而生。Newbon取自“牛犇”的谐音,意在构建一个稳定的,牢固的容器调度引擎。接下来就简单介绍一下Newbon的实现细节,并通过一系列视频进行功能展示。

组成:

      Newbon包含几个核心部分:

l   Api-Server : 为UI和第三方集成提供调用接口。

l   Scheduler : 负责解释定义,收集数据和执行调度。

l   DNS/ETCD : 负责服务注册,服务发现,订阅和容器主机访问。

l   Executer :负责执行Server端下发命令。

l   Monitor : 负责监控主机和容器的各种状态。

l   Heapster : 负责健康检查。

l   Calico+ : 经过二次开发的基于Calico的网络插件。

l   Nginx : 七层负载均衡器。

l   HAProxy : 四层/七层负载均衡器。

l   Keepalive : 高可用组件。

典型逻辑结构:

      下面是典型的逻辑结构图:

c15fc7498b5b4d059075f2a81a122fd0da383110

最上层是高可用集群,中间接负载均衡器,底层接多个应用服务,从这幅图就能看出,Newbon从设计之初就支持高可用,负载均衡和弹性伸缩,以及多服务挂载。

 

接下来我们重点介绍下Newbon中负责解释定义,收集数据和执行调度的核心组件Scheduler。

Scheduler功能包括:

l   解释服务定义

l   选择合适的节点创建容器

l   监控节点和容器运行状态

l   服务注册和注销

l   自动扩容和缩容

l   灰度升级(Rolling Upgrade)

 

解释服务定义:

结合解释服务定义,下面是一个服务示例:

a115affdb8c39187b63a3f0f62bd6aac35895a3a

应用支持的扩展配置:

9258e13c71cdaa5d7fdec4bddf506ac40ebcd82d

健康检查配置支持(TCP):

b315db5a2b5d5ac93c7b2419334792e4ebcc575c

健康检查配置支持(Http):

86c3964311507fe825330d41ad883bf01741f901

服务配置:

cfee0fc1ef8f161a541e39b1122f8daecfbad459

调度配置:

cf384f150fcf4260c7753f6fed21e001a5a99fe9

高可用集群:

11d40df5a83b38c89aa7d3acf7d17b558770f689

服务发现,服务注册和注销:

      在容器调度引擎中,这三个过程可以说是最核心的地方。Newbon借鉴了多个调度引擎的优点,使用了ETCD和DNS并结合控制服务器来实现以下功能:

·             创建服务后自动创建DNS记录用于访问相关容器:

§   A记录,通过域名访问单个容器和一组容器。

§   SRV记录,记录容器提供的服务协议、端口、优先级和提供服务的IP列表。

·             容器状态健康后注册SRV信息:

·         当容器停止或处于不健康状态时,会注销DNS A记录和SRV信息。

下面就是一个DNS纪录示例:

c361a05f2a0fa073cae3597ec370a134e77e6ccc

自动扩容和缩容:

      这一部分主要通过以下方式实现:

Agent monitor 模块实时监测容器cpu和内存使用情况:

定义性能指标阈值和容器运行上限和下限。

 扩容:

当容器平均性能指标超过阈值一段时间(1分钟)后启动自动扩容,创建更多容器以达到

阀值要求的90%。

当没有主机资源运行新容器时,自动申请新主机(限公有云环境)。

缩容:

 当一段时间(3分钟)负载持续低于阈值80%启动缩容。

优先删除新创建容器和主机,以释放资源和降低运营成本。

 

下面是一个扩容的示意图:

21dd9e953d60062df963115f2234e080b16ac759

功能展示:

      接下来我们将通过视频的方式给大家展示Newbon所支持的一系列功能,本期重点展示Newbon的自动扩展功能:

https://v.qq.com/x/page/i03670gm0fh.html

 

Q&A:

Q: 既然已经有K8S, Swarm, Mesos, Rancher等调度引擎,为什么精灵云还要自主研发调度引擎Newbon呢?

A: 调度引擎是容器云平台最核心的部分,开源固然可以快速上手,快速搭建系统,但是任何一个开源系统实际是由一个或多个公司主导的,因此在使用中经常会受制于国外。开源系统由于需求和贡献者多,因此会导致系统异常庞大,企业往往只需要使用20%功能,但是却要去维护80%的其他系统。因此,精灵云从一开始就选择自主研发调度框架,做到完全自主可控,为企业级用户提供更好的服务。

 

Q: Newbon 跟其他容器调度相比有何优势?

A: Newbon吸取各调度引擎的长处,可以说是目前国内定制能力最强,支持功能丰富的调度框架,包括在网络、应用迁移、应用快照、模板、负载均衡、弹性伸缩、高可用、CI/CD集成、灰度发布和回滚、镜像集成、日志监控等方面都有着非常大的优势。

 

Q: Newbon稳定吗?有多少用户在使用?

A: Newbon虽然是最近才对外公布,但实际是精灵云核心研发团队多年的积累。团队在内核和分布式领域有丰富的经验,主要来自于Veritas, EMC,微软和IBM,平均拥有10年以上分布式系统研发经验,曾负责华为存储软件的OEM工作。Veritas可以说是分布式领域的兵工厂,它的Veritas Cluster Server是最早的分布式中间件,K8S容器负责人Dawn Chen也曾就职于Veritas。因此,Newbon是集众家之所长,并且在精灵云的公有云上得到了充分的验证,支撑数万用户和数十万的容器调度。Newbon从EcOS 2.0开始内置,目前已经在多家中大型企业得到运用。

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

相关文章
容器技术入门1:Docker镜像管理快速入门
参加冬季实战营第四期:零基础容器技术实战。参加学习一下,教程很好,做笔记记录一下
2385 0
跨主机使用 Rex-Ray volume - 每天5分钟玩转 Docker 容器技术(77)
上一节我们在 docker1 上的 MySQL 容器中使用了 Rex-Ray volume mysqldata,更新了数据库。现在容器已经删除,今天将演示在 docker2 中重新使用这个卷。 在 dokcer2 上执行如下命令,启动 MySQL 容器: docker run --name mydb_on_docker2 -v mysqldata:/var/lib/mysql -d mysql 新容器也使用相同的卷 mysqldata,不过这次不需要指定环境变量 MYSQL_ROOT_PASSWORD,因为密码已经保存到 mysqldata 里面了。
1618 0
创建 Rex-Ray volume - 每天5分钟玩转 Docker 容器技术(76)
前面我们安装部署了 Rex-Ray,并且成功配置 VirtualBox backend,今天演示如何创建和使用 Rex-Ray volume。 在 docker1 或 docker2 上执行如下命令创建 volume: docker volume create --driver rexray --name=mysqldata --opt=size=2 volume mysqldata 创建成功,大小为 2GB。
1726 0
运行容器的最佳实践 - 每天5分钟玩转 Docker 容器技术(24)
按用途容器大致可分为两类:服务类容器和工具类的容器。 1. 服务类容器以 daemon 的形式运行,对外提供服务。比如 web server,数据库等。通过 -d 以后台方式启动这类容器是非常合适的。如果要排查问题,可以通过 exec -it 进入容器。
1058 0
通过nsenter连接docker容器
通常连接Docker容器并与其进行交互有四种方法。详情见:https://github.com/berresch/Docker-Enter-Demo,下面摘录nsenter连接的方式。 查看是否安装nsenter [root@localhost ~]# whereis nsenter ...
1296 0
如何在Docker容器内外互相拷贝数据?
如何在Docker容器内外互相拷贝数据?   从容器内拷贝文件到主机上 docker cp :/file/path/within/container /host/path/target   从主机上拷贝文件到容器内 参考自: http://stackoverflow.
1304 0
+关注
shev
精灵云(www.ghostcloud.cn)联合创始人,20年编程经验,全栈工程师,曾任索贝数码及赛门铁克架构师架构师,精通分布式系统开发,2013年开始研究LXC和Docker相关技术,目前主要从事容器云平台研发工作。
文章
问答
文章排行榜
最热
最新
相关电子书
更多
华为使用Docker支持系统容器的优化实践
立即下载
基于Mesos/Docker构建数据处理平台
立即下载
蚂蚁金服Docker网络插件 开发和实践
立即下载