K8S的配置资源管理

弱龄寄事外,委怀在琴书。这篇文章主要讲述K8S的配置资源管理相关的知识,希望能为你提供帮助。
K8S的配置资源管理 配置资源管理器 SecretSecret 是用来保存密码、token、密钥等敏感数据的 k8s 资源,这类数据虽然也可以存放在 Pod 或者镜像中,但是放在 Secret 中是为了更方便的控制如何使用数据,并减少暴露的风险。
Secret有三种类型:

  • Service Account:出Kubernetes自动创建,用来访问APIServer的Secret,所有Pod会默认使用这个Secret与APIServer通信,并且会自动排载到Pod的/run/secrets/kubernetes.io/serviceaccount目录中;
  • 【K8S的配置资源管理】Opaque:base64编码格式的Secret,用来存储用户自定义的密码、密钥等,默认的Secret类型;
  • kubernetes.io/dockerconfigjson:用来存储私有docker registry的认证信息。
Pod需要先引用才能使用某个secret,Pod有2种方式来使用secret:
  • 作为volume的一个域被一个或多个容器挂载;
  • 在拉取镜像的时候被kubelet引用。
  • 由kubelet在Pod拉取镜像时使用。
应用场景:凭据
https://kubernetes.io/docs/concepts/configuration/secret/
创建Secret1、用kubectl create secret命令创建Secret
echo -n zhangsan > username.txt echo -n abc1234> password.txtkubectl create secret generic mysecret --from-file=username.txt --from-file=password.txtkubectl get secrets NAMETYPEDATAAGE default-token-8pap6kubernetes.ioi service-account-token33dlh mysecretopaque251skubectl describe secret mysccret Name:mysecret Namiespace:default Labels:< none> Type:OpaqueData =https://www.songbingjia.com/android/=== password.txt:7 bytes username.txt:8 bytes #get或describe指令都不会展示secret的实际内容,这是出于对数据的保护的考虑

2、内容用 base64 编码,创建Secret
echo -n zhangsan | base64 emhhbmdzYw4K=echo -n abc1234 | base64 YwJjMTIzNAo==vim secret.yaml apiversion: v1 kind: secret metadata: name: mysecret1 type: Opaque data: username: emhhbmdzYW4K= password: YWJjMTIzNAo==kubectl create -f secret.yamlkubectl get secrets NAMETYPEDATAAGE default-token-8pap6 kubernetes.iol service-account-token33dlh mysecretOpaque243m mysecretlOpaque26skubectl get secret mysecret1 -o yaml apiVersion: v1 data: password: YWJjMTIzNAo== username: emhhbmdzYW4K= kind: Secret metadata: creationTimestamp: 2021-05-24T09:11:18Z name: mysecret1 namespace: default resourceVersion: "45641" selfLink: /api/v1/namespaces/default/secrets/mysecret1 uid: fffb7902-bc6f-11eb-acba-000c29d88bba type: Opaque

K8S的配置资源管理

文章图片

K8S的配置资源管理

文章图片

使用方式1、将 Secret 挂载到 Volume 中,以 Volume 的形式挂载到 Pod 的某个目录下
vim secret-test.yaml apiVersion: v1 kind: Pod metadata: name: mypod spec: containers: - name: nginx image: nginx volumeMounts: - name: secrets mountPath: "/etc/secrets" readOnly: true volumes: - name: secrets secret: secretName: mysecretkubectl create -f secret-test.yamlkubectl get pods NAMEREADYSTATUSRESTARTSAGE seret-test1/1Running016skubectl exec -it seret-test bash # cd /etc/secrets/ # ls password.txtusername.txt # vi password.txt # vi username.txt

2、将 Secret 导出到环境变量中
vim secret-test1.yaml apiVersion: v1 kind: Pod metadata: name: mypod1 spec: containers: - name: nginx image: nginx env: - name: TEST_USER valueFrom: secretKeyRef: name: mysecret1 key: username - name: TEST_PASSWORD valueFrom: secretKeyRef: name: mysecret1 key: passwordkubectl apply -f secret-test1.yaml kubectl get pods NAMEREADYSTATUSRESTARTSAGE mypod11/1Running077skubectl exec -it mypod bash # echo $TEST_USER zhangsan # echo $TEST_PASSWORD abc1234

ConfigMap与Secret类似,区别在于ConfigMap保存的是不需要加密配置的信息。
ConfigMap 功能在 Kubernetes1.2 版本中引入,许多应用程序会从配置文件、命令行参数或环境变量中读取配置信息。Con?gMap API 给我们提供了向容器中注入配置信息的机制,Con?gMap 可以被用来保存单个属性,也可以用来保存整个配置文件或者JSON二进制大对象。
应用场景:应用配置
创建 ConfigMap1、使用目录创建
mkdir /opt/configmap/vim /opt/configmap/game.properties enemies=aliens lives=3 enemies.cheat=true enemies.cheat.level=noGoodRotten secret.code.passphrase=UUDDLRLRBABAS secret.code.allowed=true secret.code.lives=30vim /opt/configmap/ui.properties color.good=purple color.bad=yellow allow.textmode=true how.nice.to.look=fairlyNicels /opt/configmap/ game.properties ui.propertieskubectl create configmap game-config --from-file=/opt/configmap/ #--from-file 指定在目录下的所有文件都会被用在 Con?gMap 里面创建一个键值对,键的名字就是文件名,值就是文件的内容kubectl get cm NAMEDATAAGE game-config210skubectl get cm game-config -o yaml apiVersion: v1 data: game.properties: | enemies=aliens lives=3 enemies.cheat=true enemies.cheat.level=noGoodRotten secret.code.passphrase=UUDDLRLRBABAS secret.code.allowed=true secret.code.lives=30 ui.properties: | color.good=purple color.bad=yellow allow.textmode=true how.nice.to.look=fairlyNice kind: ConfigMap metadata: creationTimestamp: 2021-05-25T06:49:18Z name: game-config namespace: default resourceVersion: "87803" selfLink: /api/v1/namespaces/default/configmaps/game-config uid: 541b5302-bd25-11eb-acba-000c29d88bba

2、使用文件创建
只要指定为一个文件就可以从单个文件中创建 Con?gMap
--from-file 这个参数可以使用多次,即可以使用两次分别指定上个实例中的那两个配置文件,效果就跟指定整个目录是一样的
kubectl create configmap game-config-2 --from-file=/opt/configmap/game.properties --from-file=/opt/configmap/ui.propertieskubectl get configmaps game-config-2 -o yamlkubectl describe cm game-config-2

3、使用字面值创建
使用文字值创建,利用 --from-literal 参数传递配置信息,该参数可以使用多次,格式如下
kubectl create configmap special-config --from-literal=special.how=very --from-literal=special.type=goodkubectl get configmaps special-config -o yaml apiVersion: v1 data: special.how: very#key-value 结构 special.type: good kind: ConfigMap metadata: creationTimestamp: 2021-05-25T06:59:37Z name: special-config namespace: default resourceVersion: "88610" selfLink: /api/v1/namespaces/default/configmaps/special-config uid: c4f45936-bd26-11eb-acba-000c29d88bbakubectl delete cm --all kubectl delete pod --all

Pod中使用Con?gMap1、使用 Con?gMap 来替代环境变量
vim env.yaml apiVersion: v1 kind: ConfigMap metadata: name: special-config namespace: default data: special.how: very special.type: good --- apiVersion: v1 kind: ConfigMap metadata: name: env-config namespace: default data: log_level: INFOkubectl create -f env.yaml kubectl get cm NAMEDATAAGE env-config16s special-config26s

Pod的创建
vim test-pod.yaml apiVersion: v1 kind: Pod metadata: name: test-pod spec: containers: - name: busybox image: busybox:1.28.4 command: [ "/bin/sh", "-c", "env" ] env: - name: SPECIAL_HOW_KEY valueFrom: configMapKeyRef: name: special-config key: special.how - name: SPECIAL_TYPE_KEY valueFrom: configMapKeyRef: name: special-config key: special.type envFrom: - configMapRef: name: env-config restartPolicy: Neverkubectl create -f test-pod.yamlkubectl get pods NAMEREADYSTATUSRESTARTSAGE pod-test0/1Completed033skubectl logs pod-test KUBERNETES_SERVICE_PORT=443 KUBERNETES_PORT=tcp://10.0.0.1:443 HOSTNAME=pod-test SHLVL=1 SPECIAL_HOW_KEY=very#赋值变量 SPECIAL_HOW_KEY 的值为 special-config 的 special.how: very HOME=/root SPECIAL_TYPE_KEY=good#赋值变量 SPECIAL_TYPE_KEY 的值为 special-config 的 special.type: good KUBERNETES_PORT_443_TCP_ADDR=10.0.0.1 PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin KUBERNETES_PORT_443_TCP_PORT=443 KUBERNETES_PORT_443_TCP_PROTO=tcp log_level=INFO#引入 env-config 的变量 log_level: INFO KUBERNETES_PORT_443_TCP=tcp://10.0.0.1:443 KUBERNETES_SERVICE_PORT_HTTPS=443 KUBERNETES_SERVICE_HOST=10.0.0.1 PWD=/

2、用 Con?gMap 设置命令行参数
vim test-pod2.yaml apiVersion: v1 kind: Pod metadata: name: test-pod2 spec: containers: - name: busybox image: busybox:1.28.4 command: [ "/bin/sh", "-c", "echo $(SPECIAL_HOW_KEY) $(SPECIAL_TYPE_KEY)" ] env: - name: SPECIAL_HOW_KEY valueFrom: configMapKeyRef: name: special-config key: special.how - name: SPECIAL_TYPE_KEY valueFrom: configMapKeyRef: name: special-config key: special.type envFrom: - configMapRef: name: env-config restartPolicy: Neverkubectl create -f test-pod2.yamlkubectl get pods NAMEREADYSTATUSRESTARTSAGE test-pod20/1Completed034skubectl logs test-pod2 very good

3、通过数据卷插件使用Con?gMap
在数据卷里面使用 Con?gMap,就是将文件填入数据卷,在这个文件中,键就是文件名,键值就是文件内容
vim test-pod3.yaml apiVersion: v1 kind: Pod metadata: name: test-pod3 spec: containers: - name: busybox image: busybox:1.28.4 command: [ "/bin/sh", "-c", "sleep 36000" ] volumeMounts: - name: config-volume mountPath: /etc/config volumes: - name: config-volume configMap: name: special-config restartPolicy: Neverkubectl create -f test-pod3.yaml kubectl get pods NAMEREADYSTATUSRESTARTSAGE test-pod31/1Running05skubectl exec -it test-pod3 sh # cd /etc/config/ # ls special.howspecial.type # vi special.how # vi special.type

Con?gMap的热更新
vim test-pod4.yaml apiVersion: v1 kind: ConfigMap metadata: name: log-config namespace: default data: log_level: INFO --- apiVersion: extensions/v1beta1 kind: Deployment metadata: name: my-nginx spec: replicas: 1 template: metadata: labels: run: my-nginx spec: containers: - name: my-nginx image: nginx ports: - containerPort: 80 volumeMounts: - name: config-volume mountPath: /etc/config volumes: - name: config-volume configMap: name: log-configkubectl apply -f test-pod5.yamlkubectl get pods NAMEREADYSTATUSRESTARTSAGE my-nginx-76b6489f44-6dwxh1/1Running046skubectl exec -it my-nginx-76b6489f44-6dwxh -- cat /etc/config/log_level INFOkubectl edit configmap log-config apiVersion: v1 data: log_level: DEBUG#INFO 修改成 DEBUG kind: ConfigMap metadata: annotations: kubectl.kubernetes.io/last-applied-configuration: | "apiVersion":"v1","data":"log_level":"DEBUG","kind":"ConfigMap","metadata":"annotations":,"name":"log-config","namespace":"default"#INFO 修改成 DEBUG creationTimestamp: 2021-05-25T07:59:18Z name: log-config namespace: default resourceVersion: "93616" selfLink: /api/v1/namespaces/default/configmaps/log-config uid: 1b8115de-bd2f-11eb-acba-000c29d88bba#等大概10秒左右,使用该 Con?gMap 挂载的 Volume 中的数据同步更新 kubectl exec -it my-nginx-76b6489f44-6dwxh -- cat /etc/config/log_level DEBUG

Con?gMap 更新后滚动更新 Pod
更新 Con?gMap 目前并不会触发相关 Pod 的滚动更新,可以通过在 .spec.template.metadata.annotations 中添加 version/config ,每次通过修改 version/config 来触发滚动更新
kubectl patch deployment my-nginx --patch "spec": "template": "metadata": "annotations": "version/config": "20210525" kubectl get pods NAMEREADYSTATUSRESTARTSAGE my-nginx-665dd4dc8c-j4k9t0/1ContainerCreating04s my-nginx-76b6489f44-6dwxh0/1Terminating010mkubectl get pods NAMEREADYSTATUSRESTARTSAGE my-nginx-665dd4dc8c-j4k9t1/1Running074s

PS:更新 Con?gMap 后:
  • 使用该 Con?gMap 挂载的 Env 不会同步更新。
  • 使用该 Con?gMap 挂载的 Volume 中的数据需要一段时间(实测大概10秒)才能同步更新。

    推荐阅读