缥帙各舒散，前后互相逾。这篇文章主要讲述k8s____pod调度相关的知识，希望能为你提供帮助。
一、污点容忍度Taint 与 Toleration配合使用，除非pod明确能容忍这些污点，否则无法在这些Node节点上运行。Toleration 是Pod的属性，让Pod可以运行在有污点Taint的节点上。

#添加污点、删除污点 kubectl taint node [主机] key=value:[effect] kubectl taint node [主机] key=value:[effect]-#删除污点 #含义，effect值大小写需一致 - effect值: NoSchedule | PreferNoSchedule | NoExecute - NoSchedule: 一定不被调度 - PreferNoSchedule: 尽量不要调度 - NoExecute: 禁止调度并驱除已有pod

1、配置污点

#配置PreferNoSchedule,但是可以调度 [root@km01 ~]# kubectl taint node km01 key_1=value_1:PreferNoSchedule [root@km01 ~]# kubectl describe node km01 | grep Taint Taints:key_1=value_1:PreferNoSchedule 配置拉起nacos，nacos-2运行在km01节点 [root@km01 tomcat]# kubectl get pods -o wide NAMEREADYSTATUSRESTARTSAGEIPNODENOMINATED NODEREADINESS GATES nacos-01/1Running049m10.244.2.15node01< none> < none> nacos-11/1Running049m10.244.0.15node02< none> < none> nacos-21/1Running039m10.244.1.14km01< none> < none> #配置NoExecute，不允许调度并且驱逐已有pod [root@km01 tomcat]# kubectl taint node km01 key_1=value_1:NoExecute [root@km01 tomcat]# kubetl describe node km01 | grep Taint Taints:key_1=value_1:NoExecute 查看，nacos-2已被调度至km02节点 [root@km01 tomcat]# kubectl get pods -o wide NAMEREADYSTATUSRESTARTSAGEIPNODENOMINATED NODEREADINESS GATES mysql-x6slw1/1Running119h10.244.3.11km02< none> < none> nacos-01/1Running060m10.244.2.15node01< none> < none> nacos-11/1Running060m10.244.0.15node02< none> < none> nacos-21/1Running03m12s10.244.3.13km02< none> < none> nfs-client-provisioner-9d8f7f9c5-8d2qh1/1Running119h10.244.0.13node02< none> < none> #配置NoSchedule，不允许调度pod至该节点 [root@km01 tomcat]# kubectl taint node km01 key_1=value_1:NoSchedule node/km01 tainted

2、配置容忍度
pod在spec字段配置容忍度可以使pod能调度到相应的配有污点的node节点(与污点策略要匹配)
km01打污点不允许调度至此节点

文章图片

1> 在tomcat中配置
#在deployment中加入tolerations，保证可调度至该节点

kubectl apply -f tomcat-deployment.yaml[root@km01 tomcat]# cat tomcat-deployment.yaml apiVersion: apps/v1 kind: Deployment metadata: name: my-tomcat spec: selector: matchLabels: app: my-tomcat replicas: 8 template: metadata: labels: app: my-tomcat spec: tolerations:#配置容忍度 - key: "key_1" operator: "Equal" value: "value_1" effect: "NoSchedule" containers: - name: my-tomcat image: tomcat ports: - containerPort: 8080 #可调度 [root@km01 tomcat]# kubectl get pods -o wide | grep tomcat | grep-v node01 | grep -v node02 | grep -v km02 my-tomcat-6995474cf9-c88v81/1Running06m19s10.244.1.15km01< none> < none> my-tomcat-6995474cf9-pxm591/1Running06m19s10.244.1.16km01< none> < none>

2> 格式

spec: tolerations: - key: "key" operator: "Equal" value: "value" effect: "NoExecute" tolerationSeconds: 10s #如果node节点添加NoExecute，那该节点上所有pod(无toleration)会被立刻驱逐。此处tolerationSeconds 表示node节点添加Noexecute后，pod(无toleration)还能运行多久才会被驱逐 或者 spec: tolerations: - key: "key" operator: "Exists" effect: "NoSchedule"

• operator 值为Exists 无需指定value字段
• operator 值为Equal key:value 字段都需要有
• 空key配合Exists 能匹配所有的键和值
• 空的effect匹配所有的effect
• 同一node节点允许多个Taints，pod也允许多个Toleration

3> 设置多个污点,pod只配置一个容忍
多个污点

Taints:key_1=value_1:NoExecute key_1=value_1:NoSchedule

tomcat-deployment使用原来配置，只匹配一个污点

spec: tolerations: - key: "key_1" operator: "Equal" value: "value_1" effect: "NoSchedule"

【k8s____pod调度】kubectl apply -f tomcat-deployment| 多污点只容忍度只匹配一个pod无法调度

[root@km01 tomcat]# kubectl get pods -o wide | grep km01 无km01

4> 多污点，pod都需要匹配所有污点并配置容忍
多key-value

Taints:key_1=value_1:NoExecute key_1=value_1:NoSchedule

tomcat deployment加入容忍

spec: tolerations: - key: "key_1" operator: "Equal" value: "value_1" effect: "NoSchedule" - key: "key_1" operator: "Exists" effect: "NoExecute"

kubectl apply -f tomcat-deployment|km01可以被调度

文章图片

3、节点独占
4、内置污点
1> 一些内置污点
Kubernetes v1.18 [stable]

- node.kubernetes.io/not-ready: 节点未加入集群 - node.kubernetes.io/unreachable：无法访问master - node.kubernetes.io/memory-pressure: 节点内存压力 - node.kubernetes.io/disk-pressure: 节点有磁盘压力 - node.kubernetes.io/pid-pressure: 节点有PID压力 - node.kubernetes.io/network-unavailable: 节点的网络不可用 - node.kubernetes.io/unschedulable: 节点不可调度

2> 节点故障污点
node节点结合 tolerationSeconds，Pod 就可以指定当节点出现一个或全部上述问题时还将在这个节点上运行多长的时间。Kubernetes会自动添加容忍度如下:
node.kubernetes.io/not-ready
node.kubernetes.io/unreachable
tolerationSeconds=300
当出现not-ready或者unreachable后，Pod 仍会与该节点绑定 5 分钟

tolerations: - key: "node.alpha.kubernetes.io/unreachable" operator: "Exists" effect: "NoExecute" tolerationSeconds: 300 #系统默认时长

二、nodeselector将pod调度到指定Node，通过Node标签和Pod的nodeSelector进行绑定，kubectl label命令给目标Node打上标签。根据分组可以把相应node节点进行分组，比如group=a1 group=b2 group=c3
1、打标签、删除标签

[root@km01 tomcat]# kubectl label nodes node01 group=b1 node/node01 labeled[root@km01 ~]# kubectl describe node node01 Name:node01 Roles:< none> Labels:beta.kubernetes.io/arch=amd64 beta.kubernetes.io/os=linux group=b1#查看label [root@km01 tomcat]# kubectl get node -l group=b1 NAMESTATUSROLESAGEVERSION node01Ready< none> 5d3hv1.18.6 [root@km01 ~]# kubectl get nodes --show-labels NAMESTATUSROLESAGEVERSIONLABELS km01Ready< none> 9dv1.18.6beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,kubernetes.io/arch=amd64,kubernetes.io/hostname=km01,kubernetes.io/os=linux km02Ready< none> 8dv1.18.6beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,kubernetes.io/arch=amd64,kubernetes.io/hostname=km02,kubernetes.io/os=linux node01Ready< none> 9dv1.18.6beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,group=b1,kubernetes.io/arch=amd64,kubernetes.io/hostname=node01,kubernetes.io/os=linux node02Ready< none> 7d18hv1.18.6beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,kubernetes.io/arch=amd64,kubernetes.io/hostname=node02,kubernetes.io/os=linux#删除label [root@km01 ~]# kubectl label node node01 group- node/node01 labeled [root@km01 ~]# kubectl get node -l group=b1 No resources found in default namespace.

2、pod定向到nodeselector节点
在deployment中加入nodeSelector定向选择node节点

apiVersion: apps/v1 kind: Deployment metadata: name: my-tomcat spec: selector: matchLabels: app: my-tomcat replicas: 3 template: metadata: labels: app: my-tomcat spec: containers: - name: my-tomcat image: tomcat ports: - containerPort: 8080 nodeSelector: group: b1 如下: [root@km01 tomcat]# kubectl get pods -o wide NAMEREADYSTATUSRESTARTSAGEIPNODENOMINATED NODEREADINESS GATES my-tomcat-8b8bcbdbc-6s2hg1/1Running0109s10.244.2.40node01< none> < none> my-tomcat-8b8bcbdbc-mrwl41/1Running0109s10.244.2.39node01< none> < none> my-tomcat-8b8bcbdbc-z4vjt1/1Running0109s10.244.2.38node01< none> < none>

三、Node亲和性替换nodeselector的调度策略

• RequiredDuringSchedulingIgnoredDuringExecution: 必须满足条件才可调度到node(硬性条件)
• PreferredDuringSchedulingIgnoredDuringExecution: 调度器会尝试调度pod到Node上，不强求，软限制。多个规则可通过优先级(weight)以定义运行先后顺序
• IgnoredDuringExecution: 如果node标签发生了变更，不再符合pod节点的亲和性需求，则系统将忽略node上的label变化，pod则能继续运行

1、打标签 disktype=ssd
node02打标签设置为ssd类型

[root@km01 ~]# kubectl label node node02 disktype=ssd node/node02 labeled [root@km01 ~]# kubectl get nodes --show-labels | grep node02 node02Ready< none> 7d19hv1.18.6beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,disktype=ssd,kubernetes.io/arch=amd64,kubernetes.io/hostname=node02,kubernetes.io/os=linux

2、添加亲和性nodeaffinity

vim tomcat-deployment spec: affinity: nodeAffinity: requiredDuringSchedulingIgnoredDuringExecution: nodeSelectorTerms: - matchExpressions: - key: disktype#disktype operator: In values: - ssd#ssd

全部运行在node02节点

[root@km01 tomcat]# kubectl get pods -o wide |grep tomcat my-tomcat-597775ddbd-mgtm91/1Running042s10.244.0.39node02< none> < none> my-tomcat-597775ddbd-nmxfh1/1Running042s10.244.0.40node02< none> < none> my-tomcat-597775ddbd-vtv9v1/1Running042s10.244.0.41node02< none> < none>

3、nodeAffinity、nodeSelectorTerms、Match搭配

- 同时批定nodeSelector 和 nodeAffinity，两者必须都要满足， 才能将 Pod 调度到候选节点上。 - nodeAffinity类型关联的nodeSelectorTerms有多个，只要有其中一个 nodeSelectorTerms满足的话，pod将可以调度到节点上。 - nodeSelectorTerms关联的matchExpressions条件有多个，只有当所有 matchExpressions 满足的话，Pod 才会可以调度到节点上。 - 如果修改或删除pod所调度到的节点的标签，Pod不会被删除。亲和性选择只在Pod调度期间有效

四、pod亲和性与反亲和性 1、含义
根据在节点上正在运行的Pod的标签（而不是节点的标签进行判断和调度）要求对节点和Pod两个条件进行匹配。这种规则可以描述为：如果在具有标签X的Node上运行了一个或者多个符合条件Y的Pod，那么Pod应该（如果是互斥的情况，那么就变成拒绝）运行在这个Node上。这里X指的是一个集群中的节点、区域（zone）和地域（region）等概念，通过Kubernetes内置节点标签中的key来进行声明。这个key的名字为topologyKey，意为表达节点所属的topology范围。

• kubernetes.io/hostname
• kubernetes.io/arch
• kubernetes.io/os
• failure-domain.beta.kubernetes.io/zone
• failure-domain.beta.kubernetes.io/region其中podAffinity用于调度pod可以和哪些pod部署在同一拓扑结构之下。而podAntiAffinity相反，其用于规定pod不可以和哪些pod部署在同一拓扑结构下。通过pod affinity与anti-affinity来解决pod和pod之间的关系。
  

2、创建podAntiAffinity redis-deployment
运行带有podAntiAffinity的redisd-eployment，3副本和标签选择器，确保不会将其pod调度到一个节点上

#redis-deployment [root@km01 ~]# cat redis-affinity.yaml apiVersion: apps/v1 kind: Deployment metadata: name: redis-cache spec: selector: matchLabels: app: store replicas: 3 template: metadata: labels: app: store spec: affinity: podAntiAffinity: requiredDuringSchedulingIgnoredDuringExecution: - labelSelector: matchExpressions: - key: app operator: In values: - store topologyKey: "kubernetes.io/hostname" containers: - name: redis-server image: redis:3.2

文章图片

### 3、创建web-deployment with podAnti podAffi web-server与redis会有通信，建立pod亲和性确保web-pod与redis-pod运行在同一节点，建立pod反亲和性确保web-pod不会同时运行在同一节点

apiVersion: apps/v1
kind: Deployment
metadata:
name: web-server
spec:
selector:
matchLabels:
app: web-store
replicas: 3
template:
metadata:
labels:
app: web-store
spec:
affinity:
podAntiAffinity:#反亲和性
requiredDuringSchedulingIgnoredDuringExecution:

• labelSelector:
  matchExpressions:
  • key: app
    operator: In
    values:
    • web-store
      topologyKey: " kubernetes.io/hostname"
      podAffinity:#亲和性
      requiredDuringSchedulingIgnoredDuringExecution:
• labelSelector:
  matchExpressions:
  • key: app
    operator: In
    values:
    • store
      topologyKey: " kubernetes.io/hostname"
      containers:
      • name: web-app
        image: nginx
        
        

推荐阅读

• 

  医院病假条怎么写范本 医院病假条怎么写
• 

  静脉曲张晚期有哪些罕见症状 静脉曲张初期症状
• 

  叶插多肉小苗怎么护理 叶插多肉小苗怎么养护
• 

  包皮手术后系带处水肿的危害
• 

  r 情感分析结果,金牛座情感分析
• 

  肆月肆號
• 

  有心脏病的人可以食用食用油吗？
• 

  360奇酷手机屏幕失灵怎么修 360手机屏幕失灵怎么办
• 

  捷克、斯洛伐克、匈牙利和波兰等东欧国家民族成分是不是很单一？
• 

  c网投诉分析系统
• 

  嘴唇改薄手术过程
• 

  卫衣面料有哪些种类视频 卫衣面料有哪些种类
• 

  从历史上讲,吴定都苏州不到二十年又回到越国,在越长期统治下说的不是越语吗？
• 

  4396是什么梗 4396是指什么梗
• 

  猫咪下颚有小疙瘩
• 

  亲子日记第39篇（2018年3月6日，星期二，天气（多云转晴）（妈妈篇））
• 

  运动场地面用什么材料
• 

  顺嫔为什么害魏璎珞
• 

  摄影造型法则 造型手法摄影
• 

  健康码是黄码不能出门吗

• 时序数据可视化的降采样算法
• HashMapHashTableTreeMap的底层源码分析和对比
• 这21个网络工程师必备工具，都是老杨的私人珍藏。
• samba服务器安装和配置
• Python数据分析基础-1二元操作符（又全又清晰！）
• 相关行知03--项目类型
• linux之fping命令
• MySQL之Update生命周期最详细的解剖
• OpenHarmony 源码解析之多模输入子系统（事件派发流程）