一文解析Kubernetes使用PVC后數據丟失

更新時間：2023年03月09日 08:49:47 作者：Honest1y

這篇文章主要為大家介紹了Kubernetes使用PVC后數據丟失原理解析，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進步，早日升職加薪

問題現象

使用官方postgresql鏡像，通過pvc將云硬盤掛載至數據目錄，每次重建Pod，數據庫數據都會丟失。

復現

apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: postgresql-persistent-storage
  namespace: default
spec:
  accessModes:
  - ReadWriteOnce
  resources:
    requests:
      storage: 10Gi
  storageClassName: cbs
  volumeMode: Filesystem

---

apiVersion: apps/v1
kind: Deployment
metadata:
  name: postgresql-deployment
spec:
  selector:
    matchLabels:
      app: postgresql
  template:
    metadata:
      labels:
        app: postgresql
    spec:
      containers:
      - image: postgres:12.4
        name: postgresql
        env:
        - name: POSTGRES_PASSWORD
          value: "123456"
        ports:
        - containerPort: 5432
          name: postgresql
        volumeMounts:
        - name: postgresql-persistent-storage
          ## 注意掛載點
          mountPath: /var/lib/postgresql
      volumes:
      - name: postgresql-persistent-storage
        persistentVolumeClaim:
          claimName: postgresql-persistent-storage

使用上述提供的 yaml創(chuàng)建工作負載，完成后可看到 Pod 正常運行。

根據dockerhub官方鏡像的說明中，鏡像數據庫文件存儲的默認目錄為/var/lib/postgresql/data

上述yaml中，將持久化存儲掛載到/var/lib/postgresql，看似無問題，容器也可以正常啟動，但是其實數據庫文件并沒有寫入 PVC 中，當 Pod 發(fā)生重啟重新調度時，數據庫文件便會丟失。

問題分析

進入 Pod，通過 findmnt命令，可以清楚地看到數據庫存儲文件并未保存在數據盤中，而是使用 volume 的方式掛載，被掛載到了/dev/vda1中，所以導致 Pod 重啟時，該目錄被自動釋放，數據丟失。

那是什么原因造成的呢？

我們登錄 Pod 所在的節(jié)點

通過docker history --no-trunc postgres:12.4查看鏡像的構建歷史發(fā)現，此鏡像構建所使用的 Dockerfile使用了 VOLUME命令，手工掛載了/var/lib/postgresql/data

Dockerfile構建后的鏡像中，VOLUME中的操作并不會被Kubernetes忽略，而是會繼續(xù)掛載。

即先掛載kubelet給加的volume，后掛載image.config.volumes，image.config.volumes不會覆蓋掉kubelet的volume。

如需要將其使用 PVC 覆蓋目錄，必須手工指定 PVC 的掛載點與其同地址，即將volumeMounts中的mountPath從/var/lib/postgresql調整為/var/lib/postgresql/data。

apiVersion: apps/v1
kind: Deployment
metadata:
  name: postgresql-deployment
spec:
  selector:
    matchLabels:
      app: postgresql
  template:
    metadata:
      labels:
        app: postgresql
    spec:
      containers:
      - image: postgres:12.4
        name: postgresql
        env:
        - name: POSTGRES_PASSWORD
          value: "123456"
        ports:
        - containerPort: 5432
          name: postgresql
        volumeMounts:
        - name: postgresql-persistent-storage
          mountPath: /var/lib/postgresql/data
      volumes:
      - name: postgresql-persistent-storage
        persistentVolumeClaim:
          claimName: postgresql-persistent-storage