如何优雅的排空节点上的pod?云服务商是如何回收机器的?

简介: 在 Kubernetes 中,不仅容器和 Pod 可以更换,节点也可以更换。Kubernetes 中的节点是 VM、服务器和其他具有计算能力的实体 (其实对k8s来说就是一个对象),在这些实体中运行 Pod 和容器。

概述

在 Kubernetes 中,不仅容器和 Pod 可以更换,节点也可以更换。Kubernetes 中的节点是 VM、服务器和其他具有计算能力的实体 (其实对k8s来说就是一个对象),在这些实体中运行 Pod 和容器。

节点耗尽是一种允许用户优雅地将所有容器从一个节点移动到其他节点的机制

例如

  • 服务器维护
  • k8s 集群的自动缩放(回收节点)
  • 云服务的回收机器实现

kubectl drain 背后的原理

Kubernetes 可以自动检测节点故障并将 pod 重新调度到其他节点。以下是不耗尽的情况:

1、节点出现故障——有人按下了服务器上的电源按钮。

2、kube - controller - manager,在 masters 上运行的服务,无法 从 节点上的kubelet获取NodeStatus。默认情况下,它会尝试每 5 秒获取一次状态,它由控制器的 --node - monitor - period参数控制。

3、kube - controller - manager 的另一个重要参数是 --node - monitor - grace - period ,默认为40s。它控制节点被主节点标记为 NotReady 的速度。

4、因此,大约 40 秒后, kubectl get nodes 将其中一个节点显示为 NotReady,但 pod 仍然存在并显示为正在运行。这导致我们进入 --pod-eviction - timeout ,默认为5 分钟。这意味着在节点被标记为 NotReady后,仅在 5 分钟后 Kubernetes 开始驱逐 Pod。

56f859cf372c4caaa875f70bc88a1ab8.png因此,如果有人关闭服务器,那么仅在将近六分钟后(使用默认设置),Kubernetes 开始将 pod 重新调度到其他节点

如何优雅的drain

kubectl cordon

将节点先标记为不可调度.

对于云服务商这时候会给你发短信提示你的ECS即将被释放,看你要不要续费.69a37e4222f74e7e9fe0ebce7287bcd9.png

kubectl drain

kubectl drain { NODE_NAME } 命令的两个标志需要设置:

kubectl drain ek8s-node-1 --ignore-daemonsets --delete-emptydir-data --
force

– ignore - daemonsets – 无法驱逐在DaemonSet下运行的 pod 。此标志会忽略这些 pod。

– delete - emptydir - data -确认一旦 pod 被驱逐,来自EmptyDir临时存储的数据将消失。

执行 drain 命令后,会发生以下情况:

在 Kubernetes 世界中,它是一个Taint 节点.kubernetes .io / unschedulable :NoSchedule在大多数 pod 节点上会被容忍。

除了属于 DaemonSet 的 Pod,Pod 被逐出并启动在另一个节点上。

Pod 被逐出后,现在可以关闭服务器进行维护了。

参考

【1】drain的使用

相关实践学习
通过Ingress进行灰度发布
本场景您将运行一个简单的应用,部署一个新的应用用于新的发布,并通过Ingress能力实现灰度发布。
容器应用与集群管理
欢迎来到《容器应用与集群管理》课程,本课程是“云原生容器Clouder认证“系列中的第二阶段。课程将向您介绍与容器集群相关的概念和技术,这些概念和技术可以帮助您了解阿里云容器服务ACK/ACK Serverless的使用。同时,本课程也会向您介绍可以采取的工具、方法和可操作步骤,以帮助您了解如何基于容器服务ACK Serverless构建和管理企业级应用。 学习完本课程后,您将能够: 掌握容器集群、容器编排的基本概念 掌握Kubernetes的基础概念及核心思想 掌握阿里云容器服务ACK/ACK Serverless概念及使用方法 基于容器服务ACK Serverless搭建和管理企业级网站应用
目录
相关文章
|
3月前
|
存储 Kubernetes Docker
Kubernetes节点资源耗尽状态的处理
Kubernetes节点资源耗尽状态的处理
|
3月前
|
边缘计算 人工智能 Kubernetes
边缘计算问题之理解 Kubernetes 节点资源的四层分配结构如何解决
边缘计算问题之理解 Kubernetes 节点资源的四层分配结构如何解决
33 1
|
Kubernetes Cloud Native 网络协议
【云原生】kubenetes集群存活检查&就绪检测—2023.04
【云原生】kubenetes集群存活检查&就绪检测—2023.04
171 1
|
11月前
|
Kubernetes Cloud Native 调度
k8s 服务升级为啥 pod 会部署到我们不期望的节点上??看来你还不懂污点和容忍度
k8s 服务升级为啥 pod 会部署到我们不期望的节点上??看来你还不懂污点和容忍度
|
负载均衡 网络协议 算法
云计算中的负载均衡技术,确保资源的平衡分配
云计算中的负载均衡技术,确保资源的平衡分配
535 0
|
存储 Kubernetes API
在K8S集群中,如何正确选择工作节点资源大小? 2
在K8S集群中,如何正确选择工作节点资源大小?
|
Kubernetes API 调度
在K8S集群中,如何正确选择工作节点资源大小?1
在K8S集群中,如何正确选择工作节点资源大小?
|
Kubernetes 调度 C++
kubernetes的节点与节点池概念 vs karpenter的去节点池理念 在调度上的思考
kubernetes的节点与节点池概念 vs karpenter的去节点池理念。 k8s在给定的节点资源或集群资源上调度并运行应用,其先决条件是资源某种程度上既定(即资源总量某种程度上是一定的,虽然有弹性扩容,但资源的规格是固定的,并且一旦扩容完成后再在此资源总量上执行调度决策,这仍然可以看做是资源总量固定),然后在该资源范围上做调度决策。调度的碎片化不可避免。 karpenter的逻辑是去节点
600 0
|
Kubernetes API 调度
使用 Kubernetes 扩展专用游戏服务器:第4部分-缩减节点
使用 Kubernetes 扩展专用游戏服务器:第4部分-缩减节点
158 0
使用 Kubernetes 扩展专用游戏服务器:第4部分-缩减节点
|
存储 API KVM
如何在迁移过程中更换存储资源池
在一个云迁移项目中,用户希望将系统盘存储于SATA资源池,而将数据盘全部存储于SAS资源池内。
302 0
如何在迁移过程中更换存储资源池
下一篇
无影云桌面