Kubernetes进阶之PersistentVolume 静态供给实现NFS网络存储

Kubernetes进阶之PersistentVolume 静态供给实现NFS网络存储
网络存储

NFS是一种很早的技术，单机的存储在服务器方面还是非常主流的，但nfs唯一的就是缺点比较大就是没有集群版，做集群化还是比较费劲的，文件系统做不了，这是一个很大的弊端，大规模的还是需要选择一些分布式的存储，nfs就是一个网络文件存储服务器，装完nfs之后，共享一个目录，其他的服务器就可以通过这个目录挂载到本地了，在本地写到这个目录的文件，就会同步到远程服务器上，实现一个共享存储的功能，一般都是做数据的共享存储，比如多台web服务器，肯定需要保证这些web服务器的数据一致性，那就会用到这个共享存储了，要是将nfs挂载到多台的web服务器上，网站根目录下，网站程序就放在nfs服务器上，这样的话。每个网站，每个web程序都能读取到这个目录，一致性的数据，这样的话就能保证多个节点，提供一致性的程序了。

单独拿一台服务器做nfs服务器，我们这里先搭建一台NFS服务器用来存储我们的网页根目录

[root@nfs ~]# yum install nfs-utils -y
暴露目录，让是让其他服务器能挂载这个目录

[root@nfs ~]# mkdir /opt/k8s[root@nfs ~]# vim /etc/exports/opt/k8s 192.168.30.0/24(rw,no_root_squash)

给这个网段加上权限，可读可写
[root@nfs ~]# systemctl start nfs

找个节点去挂载测试一下,只要去共享这个目录就要都去安装这个客户端

[root@k8s-node2 ~]# yum install nfs-utils -y[root@k8s-node2 ~]# mount -t nfs 192.168.30.27:/opt/k8s /mnt[root@k8s-node2 ~]# cd /mnt[root@k8s-node2 mnt]# df -h192.168.30.27:/opt/k8s    36G  5.8G   30G   17% /mnt[root@k8s-node2 mnt]# touch a.txt

去服务器端查看已经数据共享过来了

[root@nfs ~]# cd /opt/k8s/[root@nfs k8s]# lsa.txt

删除nfs服务器的数据也会删除
接下来怎么将K8s进行使用
我们把网页目录都放在这个目录下

[root@nfs k8s]# mkdir wwwroot[root@k8s-master demo]# vim nfs.yamlapiVersion: apps/v1beta1kind: Deploymentmetadata:  name: nfsspec:  replicas: 3  template:    metadata:      labels:        app: nginx    spec:      containers:      - name: nginx        image: nginx        volumeMounts:        - name: wwwroot          mountPath: /usr/share/nginx/html        ports:        - containerPort: 80      volumes:      - name: wwwroot        nfs:          server: 192.168.30.27          path: /opt/k8s/wwwroot

[root@k8s-master demo]# kubectl create -f nfs.yaml

[root@k8s-master demo]# kubectl get podNAME                                READY   STATUS             RESTARTS   AGEmypod                               1/1     Running            0          6h7mmypod2                              1/1     Running            0          6hnginx-5ddcc6cb74-lplxl              1/1     Running            0          6h53mnginx-deployment-744d977b46-8q97k   1/1     Running            0          48snginx-deployment-744d977b46-ftjfk   1/1     Running            0          48snginx-deployment-744d977b46-nksph   1/1     Running            0          48sweb-67fcf9bf8-mrlhd                 1/1     Running            0          103m

进入容器并查看挂载，确定挂载上

[root@k8s-master demo]# kubectl exec -it  nginx-deployment-744d977b46-8q97k bashroot@nginx-deployment-744d977b46-8q97k:/# df -hFilesystem                      Size  Used Avail Use% Mounted onoverlay                          17G  5.6G   12G  33% /tmpfs                            64M     0   64M   0% /devtmpfs                           2.0G     0  2.0G   0% /sys/fs/cgroup/dev/mapper/centos-root          17G  5.6G   12G  33% /etc/hostsshm                              64M     0   64M   0% /dev/shm192.168.30.27:/opt/k8s/wwwroot   36G  5.8G   30G  17% /usr/share/nginx/htmltmpfs                           2.0G   12K  2.0G   1% /run/secrets/kubernetes.io/serviceaccounttmpfs                           2.0G     0  2.0G   0% /proc/acpitmpfs                           2.0G     0  2.0G   0% /proc/scsitmpfs                           2.0G     0  2.0G   0% /sys/firmware

我们在源pod的网页目录下写入数据，并查看我们的nfs服务器目录下也会共享

root@nginx-deployment-744d977b46-8q97k:/# cd /usr/share/nginx/html/root@nginx-deployment-744d977b46-8q97k:/usr/share/nginx/html# lsroot@nginx-deployment-744d977b46-8q97k:/usr/share/nginx/html# echo "hello world" > index.htmlroot@nginx-deployment-744d977b46-8q97k:/usr/share/nginx/html# cat index.html hello world

测试查看

[root@nfs k8s]# cd wwwroot/[root@nfs wwwroot]# ls[root@nfs wwwroot]# lsindex.html[root@nfs wwwroot]# cat index.html hello world

K8s为了做存储的编排
数据持久卷PersistentVolume 简称pv/pvc主要做容器存储的编排

• PersistentVolume（PV）：对存储资源创建和使用的抽象，使得存储作为集群中的资源管理
pv都是运维去考虑，用来管理外部存储的
• 静态 ：提前创建好pv，比如创建一个100G的pv,200G的pv,让有需要的人拿去用，就是说pvc连接pv,就是知道pv创建的是多少，空间大小是多少，创建的名字是多少，有一定的可匹配性
• 动态
• PersistentVolumeClaim（PVC）：让用户不需要关心具体的Volume实现细节
使用多少个容量来定义，比如开发要部署一个服务要使用10个G，那么就可以使用pvc这个资源对象来定义使用10个G，其他的就不用考虑了
PersistentVolume 静态供给

先创建一个容器应用

[root@k8s-master ~]# cd demo/[root@k8s-master demo]# mkdir storage[root@k8s-master demo]# cd storage/[root@k8s-master storage]# vim pod.yaml

apiVersion: v1kind: Podmetadata:  name: my-podspec:    containers:    - name: nginx      image: nginx:latest      ports:      - containerPort: 80      volumeMounts:        - name: www          mountPath: /usr/share/nginx/html  volumes:    - name: www      persistentVolumeClaim:        claimName: my-pvc

卷需求yaml,这里的名称一定要对应，一般两个文件都放在一块

[root@k8s-master storage]# vim pvc.yamlapiVersion: v1kind: PersistentVolumeClaimmetadata:  name: my-pvcspec:  accessModes:    - ReadWriteMany  resources:    requests:      storage: 5Gi

接下来就是运维出场了，提前创建好pv

[root@k8s-master storage]# vim pv.yamlapiVersion: v1kind: PersistentVolumemetadata:  name: zhaochengspec:  capacity:    storage: 5Gi  accessModes:    - ReadWriteMany  nfs:    path: /opt/k8s/zhaochengserver: 192.168.30.27

提前创建好pv,以及挂载目录

[root@k8s-master storage]# kubectl create -f pv.yaml persistentvolume/my-pv created[root@k8s-master storage]# kubectl get pvzhaocheng   5Gi        RWX            Retain           Available                                   5s

我再创建一个pv，在nfs服务器提前把目录创建好,名称修改一下

[root@localhost ~]# cd /opt/k8s/[root@localhost k8s]# mkdir zhaocheng[root@k8s-master storage]# vim pv2.yaml apiVersion: v1kind: PersistentVolumemetadata:  name: zhaochengchengspec:  capacity:    storage: 10Gi  accessModes:    - ReadWriteMany  nfs:    path: /opt/k8s/zhaochengchengserver: 192.168.30.27

[root@k8s-master storage]# kubectl get pvzhaocheng        5Gi        RWX            Retain           Available                                   13szhaochengcheng   10Gi       RWX            Retain           Available                                   4s

然后现在创建一下我们的pod和pvc,这里我写在一起了

[root@k8s-master storage]# vim pod.yamlapiVersion: v1kind: Podmetadata:  name: my-podspec:  containers:  - name: nginx    image: nginx:latest    ports:    - containerPort: 80    volumeMounts:      - name: www        mountPath: /usr/share/nginx/html  volumes:    - name: www      persistentVolumeClaim:        claimName: my-pvc---apiVersion: v1kind: PersistentVolumeClaimmetadata:  name: my-pvcspec:  accessModes:    - ReadWriteMany  resources:    requests:      storage: 5Gi[root@k8s-master storage]# kubectl create -f pod.yaml 

这里会根据我们pod的需求去匹配我们静态的pv，我们是创建了一个5G，一个10G，根据自身大小去匹配

[root@k8s-master storage]# kubectl get pod,pvcpod/my-pod                 1/1     Running   0          13spod/nfs-744d977b46-dh9xj   1/1     Running   0          12mpod/nfs-744d977b46-kcx6h   1/1     Running   0          12mpod/nfs-744d977b46-wqhc6   1/1     Running   0          12mpersistentvolumeclaim/my-pvc   Bound    zhaocheng   5Gi        RWX                           13s

进入容器查看我们的使用内存大小

[root@k8s-master storage]# kubectl exec -it pod/my-pod bashroot@my-pod:/# df -ThFilesystem                       Type     Size  Used Avail Use% Mounted onoverlay                          overlay   17G  4.9G   13G  29% /tmpfs                            tmpfs     64M     0   64M   0% /devtmpfs                            tmpfs    2.0G     0  2.0G   0% /sys/fs/cgroup/dev/mapper/centos-root          xfs       17G  4.9G   13G  29% /etc/hostsshm                              tmpfs     64M     0   64M   0% /dev/shm192.168.30.27:/opt/k8s/zhaocheng nfs4      36G  5.8G   30G  17% /usr/share/nginx/htmltmpfs                            tmpfs    2.0G   12K  2.0G   1% /run/secrets/kubernetes.io/serviceaccounttmpfs                            tmpfs    2.0G     0  2.0G   0% /proc/acpitmpfs                            tmpfs    2.0G     0  2.0G   0% /proc/scsitmpfs                            tmpfs    2.0G     0  2.0G   0% /sys/firmware

去创建一个网页测试

root@my-pod:/# cd /usr/share/nginx/html/root@my-pod:/usr/share/nginx/html# lsroot@my-pod:/usr/share/nginx/html# echo "5G ready" > index.html root@my-pod:/usr/share/nginx/html# cat index.html 5G ready

去我们的nfs服务器查看

[root@localhost ~]# cd /opt/k8s/[root@localhost k8s]# lswwwroot  zhaocheng  zhaochengcheng[root@localhost k8s]# cd zhaocheng[root@localhost zhaocheng]# cat index.html 5G ready

绑定一起了和我们5G的

[root@k8s-master storage]# kubectl get pvzhaocheng        5Gi        RWX            Retain           Bound       default/my-pvc                           8m52szhaochengcheng   10Gi       RWX            Retain           Available                                            7m51s