k8s存儲支持多種模式：本地存儲:hostPath/emptyDir，傳遞網絡存儲:iscsi/nfs，分布式網絡存儲：glusterfs/rbd/cephfs，以及云存儲等；
k8s默認容器如果重建，則容器中文件將丟失，為了解決這些問題，通常我們會將容器中需要持久化的文件存儲到其他可持久化存儲目錄中。

1.存儲到臨時目錄

  spec:
      nodeSelector:
        kubernetes.io/hostname: k8s-node2  #指定工作在節點2上
      containers:
      - name: nginx-web
        image: nginx:latest
        ports:
        - containerPort: 80
        volumeMounts:
        - mountPath: /usr/share/nginx/html  #容器目錄
          name: html
      volumes:
        - name: html
            emptyDir:  {}

這種模式數據存儲將隨著pod的創建與銷毀生命周期存在，數據將不持久化存儲。

2.存儲到宿主機目錄

  spec:
      nodeSelector:
        kubernetes.io/hostname: k8s-node2  #指定工作在節點2上
      containers:
      - name: nginx-web
        image: nginx:latest
        ports:
        - containerPort: 80
        volumeMounts:
        - mountPath: /usr/share/nginx/html  #容器目錄
          name: html
      volumes:
      - name: html
        hostPath:  #類型為hostPath，即宿主機文件路徑
          path: /data/nginx/html   #宿主機目錄
          type:  DirectoryOrCreate

優點：簡單易用，無需額外支持
缺點：依賴宿主機磁盤容量，pod與宿主機存在強耦合，不利于管理。當pod部署多個副本并分配到不同host時，數據不共享；當pod漂移時，數據不同步；當node故障時，數據易丟失；

3.存儲到NFS中

3.1安裝NFS

#master節點安裝nfs
[root@k8s-master nginx]# yum -y install nfs-utils
#創建nfs目錄
[root@k8s-master nginx]# mkdir -p /nfs/data/
#修改權限
[root@k8s-master nginx]# chmod -R 777 /nfs/data
#編輯export文件,這個文件就是nfs默認的配置文件
[root@k8s-master nginx]# vim /etc/exports
/nfs/data *(rw,no_root_squash,sync)
#配置生效
[root@k8s-master nginx]# exportfs -r
#查看生效
[root@k8s-master nginx]# exportfs
/nfs/data       <world>
#啟動rpcbind、nfs服務
[root@k8s-master nginx]# systemctl restart rpcbind && systemctl enable rpcbind
[root@k8s-master nginx]# systemctl restart nfs && systemctl enable nfs
Created symlink from /etc/systemd/system/multi-user.target.wants/nfs-server.service to /usr/lib/systemd/system/nfs-server.service.
#查看 RPC 服務的注冊狀況
[root@k8s-master nginx]# rpcinfo -p localhost
   program vers proto   port  service
    100000    4   tcp    111  portmapper
    100000    3   tcp    111  portmapper
    100000    2   tcp    111  portmapper
    100000    4   udp    111  portmapper

#showmount測試
[root@k8s-master nginx]# showmount -e 192.168.0.66
 Export list for 192.168.0.66:
 /nfs/data *

3.2創建PV
創建前我們先在master節點 mkdir /nfs/data/nginx 創建出一個nginx子目錄供pv使用

apiVersion: v1
kind: PersistentVolume
metadata:
  name: nfs-pv
  namespace: default
  labels:
    pv: nfs-pv
spec:
  capacity:
    storage: 100Mi
  accessModes:
    - ReadWriteMany
  persistentVolumeReclaimPolicy: Retain
  storageClassName: nfs
  nfs:  
    server: 192.168.0.66
    path: "/nfs/data/nginx"   #NFS目錄，需要該目錄在NFS上存在

然后執行創建

[root@k8s-master nfs]# kubectl apply -f pv.yaml 
persistentvolume/nfs-pv created
[root@k8s-master nfs]# kubectl get pv
NAME     CAPACITY   ACCESS MODES   RECLAIM POLICY   STATUS      CLAIM   STORAGECLASS   REASON   AGE
nfs-pv   100Mi      RWX            Retain           Available                                   7s

PV 的訪問模式（accessModes）有三種：
ReadWriteOnce（RWO）：是最基本的方式，可讀可寫，但只支持被單個 Pod 掛載。
ReadOnlyMany（ROX）：可以以只讀的方式被多個 Pod 掛載。
ReadWriteMany（RWX）：這種存儲可以以讀寫的方式被多個 Pod 共享。

PV 的回收策略（persistentVolumeReclaimPolicy，即 PVC 釋放卷的時候 PV 該如何操作）也有三種：
Retain，不清理, 保留 Volume（需要手動清理）
Recycle，刪除數據，即 rm -rf /volume/*（只有 NFS 和 HostPath 支持）
Delete，刪除存儲資源，比如刪除 AWS EBS 卷（只有 AWS EBS, GCE PD, Azure Disk 和 Cinder 支持）
PVC釋放卷是指用戶刪除一個PVC對象時，那么與該PVC對象綁定的PV就會被釋放。

PersistentVolume有四種狀態：
Available: 可用狀態
Bound: 綁定到PVC
Released: PVC被刪掉，但是尚未回收
Failed : 自動回收失敗
3.3創建PVC
vim pvc.yaml

apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: nfs-pvc
  namespace: default
spec:
  accessModes:
    - ReadWriteMany
  resources:
    requests:
      storage: 50Mi  #容量
  selector:
    matchLabels:
      pv: nfs-pv   #關聯pv 的label,key/value要一致

執行創建命令

[root@k8s-master nfs]# kubectl apply -f pvc.yaml 
persistentvolumeclaim/nfs-pvc created
[root@k8s-master nfs]# kubectl get pvc
NAME      STATUS   VOLUME   CAPACITY   ACCESS MODES   STORAGECLASS   AGE
nfs-pvc   Bound    nfs-pv   100Mi      RWX 
[root@k8s-master nfs]# kubectl get pv
NAME     CAPACITY   ACCESS MODES   RECLAIM POLICY   STATUS   CLAIM             STORAGECLASS   REASON   AGE
nfs-pv   100Mi      RWX            Retain           Bound    default/nfs-pvc
此時pv狀態已經從Available變成Bound狀態。

3.4 創建pod并使用pvc存儲資源
vim nginx.yaml #我們用nginx鏡像進行驗證，將html目錄映射到nfs目錄中

#deploy
apiVersion: apps/v1
kind: Deployment
metadata:
  name: nfs-nginx
  namespace: default
spec:
  selector:
    matchLabels:
      app: nfs-nginx
  replicas: 2
  template:
    metadata:
      labels:
        app: nfs-nginx
    spec:
      containers:
      - name: nginx-web
        image: nginx:latest
        ports:
        - containerPort: 80
        volumeMounts:
        - mountPath: /usr/share/nginx/html
          name: html
      volumes:
      - name: html
        persistentVolumeClaim:
          claimName: nfs-pvc
---
#service
apiVersion: v1
kind: Service
metadata:
  name: nfs-nginx
  namespace: default
spec:
  type: NodePort
  ports:
  - port: 80
    protocol: TCP
    targetPort: 80
    nodePort: 31681
  selector:
    app: nfs-nginx

創建pod容器

[root@k8s-master nfs]# kubectl apply -f nginx.yaml
[root@k8s-master nfs]# kubectl get pods  -o wide
NAME                         READY   STATUS    RESTARTS   AGE   IP            NODE        NOMINATED NODE   READINESS GATES
nfs-nginx-7695b95db6-l74zx   1/1     Running   0          12s   10.244.2.93   k8s-node1   <none>           <none>
nfs-nginx-7695b95db6-qcqp8   1/1     Running   0          12s   10.244.1.22   k8s-node2   <none>           <none>

如果kubectl describe pods xxx 發現有如下報錯，則在節點服務器上安裝nfs-unitls

Output: Running scope as unit run-20005.scope.
mount: wrong fs type, bad option, bad superblock on 192.168.0.66:/nfs/data/nginx,
       missing codepage or helper program, or other error

各節點安裝并啟用nfs
yum install nfs-utils
systemctl start nfs & systemctl enable nfs
systemctl start rpcbind & systemctl enable rpcbind

3.5驗證
3.5.1直接放文件到NFS的/nfs/data/nginx目錄
我們在/nfs/data/nginx目錄創建了一個1.html文件

<html>
<body>Test01</body>
</html>

驗證1正常

3.5.2 在容器1的/usr/share/nginx/html目錄創建文件2.html

<html>
<body>Test02</body>
</html>

3.5.3 在容器2的/usr/share/nginx/html目錄創建文件3.html

<html>
<body>Test03</body>
</html>

分別測試訪問2.html和3.html

測試2 2.html驗證正常

測試3 3.html驗證正常

此外我們進入容器查看，目錄中文件是共享的：

root@nfs-nginx-7695b95db6-l74zx:/usr/share/nginx/html# ls
1.html  2.html  3.html

3.5.4 pod銷毀重建
kubectl delete -f nginx.yaml
kubectl apply -f nginx.yaml
再次訪問1.html/2.html/3.html，依舊可以訪問到，說明文件未丟失。

root@nfs-nginx-7695b95db6-78wml:/usr/share/nginx/html# ls
1.html  2.html  3.html
#新創建的容器，依舊可以看到這些文件

4.結語

NFS掛載有靜態與動態兩種不同模式，動態掛載模式需要創建StorageClass，使用過程相對復雜，本文采用的是靜態模式。
另外對于k8s集群來講，NFS并不是最理想存儲模式，建議優先采用分布式存儲方案，如cephfs存儲。

本文參考
https://www.cnblogs.com/sunsky303/p/11578206.html
http://www.lxweimin.com/p/65ed4bdf0e89

三个男躁一个女,国精产品一区一手机的秘密,麦子交换系列最经典十句话,欧美国产综合欧美视频

k8s掛載存儲模式---NFS

k8s掛載存儲模式---NFS

1.存儲到臨時目錄

2.存儲到宿主機目錄

3.存儲到NFS中

4.結語

三个男躁一个女,国精产品一区一手机的秘密,麦子交换系列最经典十句话,欧美 国产 综合 欧美 视频

k8s掛載存儲模式---NFS

1.存儲到臨時目錄

2.存儲到宿主機目錄

3.存儲到NFS中

4.結語

三个男躁一个女,国精产品一区一手机的秘密,麦子交换系列最经典十句话,欧美国产综合欧美视频