k8s污点和容忍度

一、污点

1、简介

使用 kubectl taint 命令可以给某个 Node 节点设置污点,Node 被设置上污点之后就和 Pod 之间存在了一种互斥的关系,可以让 Node 拒绝 Pod 的调度执行,甚至将 Node 已经存在的 Pod 驱逐出去。

每个污点的组成如下:

key=value:effect

每个污点有一个 key 和 value 作为污点的标签,其中 value 可以为空,effect 描述污点的作用。当前 taint effect 支持如下三个选项:

1、NoSchedule :表示 k8s 将不会将 Pod 调度到具有该污点的 Node 上。

2、PreferNoSchedule :表示 k8s 将尽量避免将 Pod 调度到具有该污点的 Node 上。

3、NoExecute :表示 k8s 将不会将 Pod 调度到具有该污点的 Node 上,同时会将 Node 上已经存在的 Pod 驱逐出去。

2、污点的设置、查看和去除

设置污点:

kubectl taint nodes node1 key1=value1:NoSchedule

节点说明中,查找 Taints 字段:

kubectl describe pod pod-name

去除污点减号:

kubectl taint nodes node1 key1:NoSchedule-

实例:

apiVersion: v1
kind: Pod
metadata:
	name: affinity
	labels:
		app: node-affinity-pod
spec:
	containers:
	- name: with-node-affinity
		image: hub.atguigu.com/library/myapp:v1
		tolerations: #容忍污点
		- key: “key1” #污点key
	operator: “Equal”
		value: “value1”
		effect: “NoSchedule”
		tolerationSeconds: 3600 #容忍时间

二、容忍(Tolerations)

1、简介

设置了污点的 Node 将根据 taint 的 effect:NoSchedule、PreferNoSchedule、NoExecute 和 Pod 之间产生互斥的关系,Pod 将在一定程度上不会被调度到 Node 上。 但我们可以在 Pod 上设置容忍 ( Toleration ) ,意思是设置了容忍的 Pod 将可以容忍污点的存在,可以被调度到存在污点的 Node 上

污点和容忍度(Toleration)相互配合,可以用来避免 Pod 被分配到不合适的节点上。 每个节点上都可以应用一个或多个污点,这表示对于那些不能容忍这些污点的 Pod,是不会被该节点接受的。

pod.spec.tolerations

tolerations:
- key: “key1”
	operator: “Equal”
	value: “value1”
	effect: “NoSchedule”
tolerationSeconds: 3600
- key: “key1”
	operator: “Equal”
	value: “value1”
	effect: “NoExecute”
- key: “key2”
	operator: “Exists”
	effect: “NoSchedule”

其中 key, vaule, effect 要与 Node 上设置的 taint 保持一致
operator 的值为 Exists 将会忽略 value 值
tolerationSeconds 用于描述当 Pod 需要被驱逐时可以在 Pod 上继续保留运行的时间,类似限期驱离

1、当不指定 key 值时,表示容忍所有的污点 key:

tolerations:
- operator: “Exists”

2、当不指定 effect 值时,表示容忍所有的污点作用

tolerations:
- key: “key”
operator: “Exists”

3、有多个 Master 存在时,防止资源浪费,可以如下设置,让master也启动pod

kubectl taint nodes Node-Name node-role.kubernetes.io/master=:PreferNoSchedule

例子

假设您给一个节点添加了如下污点:

kubectl taint nodes node1 key1=value1:NoSchedule
kubectl taint nodes node1 key1=value1:NoExecute
kubectl taint nodes node1 key2=value2:NoSchedule

假定有一个 Pod,它有两个容忍度:

tolerations:
- key: "key1"
  operator: "Equal"
  value: "value1"
  effect: "NoSchedule"
- key: "key1"
  operator: "Equal"
  value: "value1"
  effect: "NoExecute"

在这种情况下,上述 Pod 不会被分配到上述节点,因为其没有容忍度和第三个污点相匹配。 但是如果在给节点添加上述污点之前,该 Pod 已经在上述节点运行, 那么它还可以继续运行在该节点上,因为第三个污点是三个污点中唯一不能被这个 Pod 容忍的。

通常情况下,如果给一个节点添加了一个 effect 值为 NoExecute 的污点, 则任何不能忍受这个污点的 Pod 都会马上被驱逐, 任何可以忍受这个污点的 Pod 都不会被驱逐。 但是,如果 Pod 存在一个 effect 值为 NoExecute 的容忍度指定了可选属性 tolerationSeconds 的值,则表示在给节点添加了上述污点之后, Pod 还能继续在节点上运行的时间。例如

tolerations:
- key: "key1"
  operator: "Equal"
  value: "value1"
  effect: "NoExecute"
  tolerationSeconds: 3600

这表示如果这个 Pod 正在运行,同时一个匹配的污点被添加到其所在的节点, 那么 Pod 还将继续在节点上运行 3600 秒,然后被驱逐。 如果在此之前上述污点被删除了,则 Pod 不会被驱逐。

参考链接:

链接一

链接二


版权声明:本文为Jacson__原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明。