Kubernetes|k8s创建pv&pvc Kubernetes|k8s创建pv

pv&pvc简介 k8s提供了emptyDir,hostPath,rbd,cephfs等存储方式供容器使用,不过这些存储方式都有一个缺点:开发人员必须得知指定存储的相关配置信息,才能使用存储.例如要使用cephfs,Pod的配置信息就必须指明cephfs的monitor,user,selectFile等等,而这些应该是系统管理员的工作.对此,k8s提供了两个新的API资源:PersistentVolume,PersistentVolumeClaim
PV(PersistentVolume)是管理员已经提供好的一块存储.在k8s集群中,PV像Node一样,是一个资源
PVC(PersistentVolumeClaim)是用户对PV的一次申请.PVC对于PV就像Pod对于Node一样,Pod可以申请CPU和Memory资源,而PVC也可以申请PV的大小与权限
有了PersistentVolumeClaim,用户只需要告诉Kubernetes需要什么样的存储资源,而不必关心真正的空间从哪里分配,如何访问等底层细节信息; 这些Storage Provider的底层信息交给管理员来处理,只有管理员才应该关心创建PersistentVolume的细节信息
实验实验环境:

IP	备注
192.168.1.10	master

目的:使用nfs类型的PV,并使用Job验证PV创建是否创建成功

在host1上创建nfs服务器,用于提供存储
安装nfs服务端:

yum install nfs-utils rpcbind

创建用于nfs服务的存储文件夹:

mkdir -p /data/nfs

编辑/etc/exports文件:

# vim /etc/exports /data/nfs 192.168.1.0/24(rw,sync)

开启nfs服务:

systemctl start nfs-server.service

检验是否开启成功:

# showmount -e Export list for host1: /data/nfs 192.168.1.0/24

创建pv
编辑pv资源的配置文件:

[kube@host1 ~]$ cat pv_nfs.yml apiVersion: v1 kind: PersistentVolume metadata: name: nfspv1 spec:capacity: storage: 1Gi #指定访问模式 accessModes: #pv能以readwrite模式mount到单个节点 - ReadWriteOnce #指定pv的回收策略,即pvc资源释放后的事件.recycle(不建议,使用动态供给代替)删除pvc的所有文件 persistentVolumeReclaimPolicy: Recycle #指定pv的class为nfs,相当于为pv分类,pvc将指定class申请pv storageClassName: mynfs #指定pv为nfs服务器上对应的目录 nfs: path: /data/nfs server: 192.168.1.10

应用该pv资源:

[kube@host1 ~]$ kubectl apply -f pv_nfs.yml persistentvolume/nfspv1 created

查看该pv资源:

[kube@host1 ~]$ kubectl get pv NAMECAPACITYACCESS MODESRECLAIM POLICYSTATUSCLAIMSTORAGECLASSREASONAGE nfspv11GiRWORecycleAvailablemynfs14s

创建pvc
编辑pvc资源配置文件:

[kube@host1 ~]$ cat pvc_nfs.yml kind: PersistentVolumeClaim apiVersion: v1 metadata: name: nfspvc1 spec: accessModes: - ReadWriteOnce resources: requests: storage: 1Gi storageClassName: mynfs

应用pvc配置文件:

[kube@host1 ~]$ kubectl apply -f pvc_nfs.yml persistentvolumeclaim/nfspvc1 created

查看该pvc资源:

[kube@host1 ~]$ kubectl get pvc NAMESTATUSVOLUMECAPACITYACCESS MODESSTORAGECLASSAGE nfspvc1Boundnfspv11GiRWOmynfs24s

创建应用资源,使用pvc存储
编辑应用资源配置文件:

[kube@host1 ~]$ cat pvjob.yml apiVersion: batch/v1 kind: Job metadata: name: pvjob spec: template: spec: containers: - name: bbox1 image: busybox args: - /bin/sh - -c - echo "hello pv" > /mydata/hello volumeMounts: - mountPath: "/mydata" name: mydata restartPolicy: Never volumes: - name: mydata persistentVolumeClaim: claimName: nfspvc1

【Kubernetes|k8s创建pv&pvc】该job将在nfs的volume创建一个hello文件,打印”hello pv”字符串
应用该Job资源:

[kube@host1 ~]$ kubectl apply -f pvjob.yml job.batch/pvjob created

查看host1上的/data/nfs目录,检查实验结果:

[kube@host1 ~]$ cat /data/nfs/hello hello pv

实验成功!
排错在这次实验中出现了几个错误:
1. 使用pvc存储的pod一直处于pending状态,无法启动

[kube@host1 ~]$ kubectl get pod NAMEREADYSTATUSRESTARTSAGE pvjob-47cwq0/1Pending05s [kube@host1 ~]$ kubectl get pod NAMEREADYSTATUSRESTARTSAGE pvjob-47cwq0/1Pending03m

查看该pod的启动事件:

[kube@host1 ~]$ kubectl describe pod pvjob-47cwq Name:pvjob-47cwq Namespace:default Node:host3/192.168.1.30 Status:Pending IP: Events: TypeReasonAgeFromMessage ------------------------- NormalScheduled44sdefault-schedulerSuccessfully assigned default/liveness to host3 WarningFailedMount44skubelet, host3MountVolume.SetUp failed for volume "nfspv1" : mount failed: exit status 32 Mounting command: systemd-run Mounting arguments: --description=Kubernetes transient mount for /var/lib/kubelet/pods/91ddd2ee-a2b8-11e8-a8f5-525400909158/volumes/kubernetes.io~nfs/nfspv1 --scope -- mount -t nfs 192.168.1.10:/data/nfs /var/lib/kubelet/pods/91ddd2ee-a2b8-11e8-a8f5-525400909158/volumes/kubernetes.io~nfs/nfspv1 Output: Running scope as unit run-24516.scope. mount: wrong fs type, bad option, bad superblock on 192.168.122.10:/data/nfs, missing codepage or helper program, or other error (for several filesystems (e.g. nfs, cifs) you might need a /sbin/mount. helper program)In some cases useful info is found in syslog - try dmesg | tail or so.

注意到报错信息:wrong fs type, bad option, bad superblock on 192.168.1.10:/data/nfs,这是因为host3没有安装nfs-utils软件包,无法识别nfs类型的文件系统,也无法作为nfs的客户端使用
解决方案:安装nfs-utils软件包,删除之前创建失败的Job资源并重新创建

[root@host3 ~]# yum install nfs-utils -y ... Installed: nfs-utils.x86_64 1:1.3.0-0.54.el7[kube@host1 ~]$ kubectl delete pod pvjob-47cwq pod "pvjob-47cwq" deleted[kube@host1 ~]$ kubectl apply -f pvjob-47cwq job.batch/pvjob created

可以看到,Job资源正常创建: