Kubernetes持久化存储PV、PVC与回收策略实践笔记
一、kubeadm token 存于 Secret
kubeadm 创建的 token 实际用 Secret 存储。
kubeadm token list
# TOKEN: demo.demosecret
kubectl get secrets -A | grep demo
# kube-system bootstrap-token-demo bootstrap.kubernetes.io/token
kubectl -n kube-system get secrets bootstrap-token-demo -o yaml
Secret 中的 token-id、token-secret 是 base64 编码:
echo <token-id的base64> | base64 -d # demo
echo <token-secret的base64> | base64 -d # demosecret
二、PV / PVC / StorageClass 概述
| 资源 | 说明 |
|---|---|
| PersistentVolume(pv) | 持久化卷,关联后端存储(如 nfs),可限制容量 |
| PersistentVolumeClaim(pvc) | 自动关联 pv,并为 Pod 提供存储卷 |
| StorageClass(sc) | 存储类,可动态自动创建 pv |
三、手动创建 PV
apiVersion: v1
kind: PersistentVolume
metadata:
name: demo-linux-pv01
labels:
school: demo
spec:
accessModes:
- ReadWriteMany
nfs:
path: /demo/data/nfs-server/pv/linux/pv001
server: 10.0.0.231
persistentVolumeReclaimPolicy: Retain
capacity:
storage: 2Gi
访问模式 accessModes
| 模式 | 简称 | 含义 |
|---|---|---|
| ReadWriteOnce | RWO | 单节点读写,该节点多个 Pod 可同时访问 |
| ReadOnlyMany | ROX | 多节点只读 |
| ReadWriteMany | RWX | 多节点读写 |
| ReadWriteOncePod | RWOP | 单 Pod 读写(K8s 1.22+,仅 CSI) |
回收策略 persistentVolumeReclaimPolicy
| 策略 | 说明 |
|---|---|
| Retain | 保留回收,删 pvc 后 pv 仍存在,状态 Released,需管理员手动回收 |
| Delete | 删除 pv 及其后端数据(建议配合 sc 才能看到效果) |
| Recycle | 已弃用,相当于 rm -rf /thevolume/*,推荐动态供给替代 |
创建:
kubectl apply -f manual-pv.yaml
kubectl get pv
# demo-linux-pv01 2Gi RWX Retain Available
mkdir -pv /demo/data/nfs-server/pv/linux/pv00{1..3}
kubectl get pv 字段:NAME(名称)、CAPACITY(容量)、ACCESS MODES(访问模式)、RECLAIM POLICY(回收策略)、STATUS(状态)、CLAIM(被哪个 pvc 使用)、STORAGECLASS、REASON、AGE。
四、手动创建 PVC
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
name: demo-linux-pvc
spec:
accessModes:
- ReadWriteMany
resources:
limits:
storage: 4Gi
requests:
storage: 3Gi
kubectl apply -f manual-pvc.yaml
kubectl get pv,pvc
# demo-linux-pvc Bound demo-linux-pv02 5Gi RWX
绑定规则:pvc 会匹配 accessModes 相同、容量满足 requests 的 Available pv,自动选择合适的那一个。请求(requests)或上限(limits)超出可用 pv 容量时无法绑定成功。
五、Pod 引用 PVC
apiVersion: apps/v1
kind: Deployment
metadata:
name: deloy-xiuxian
spec:
replicas: 3
selector:
matchLabels:
apps: xiuxian
template:
metadata:
labels:
apps: xiuxian
spec:
volumes:
- name: data
persistentVolumeClaim:
claimName: demo-linux-pvc
readOnly: false
containers:
- name: c1
image: registry.cn-hangzhou.aliyuncs.com/demo-k8s/apps:v2
volumeMounts:
- name: data
mountPath: /demo-pvc
写入测试:
kubectl exec -it <pod> -- sh
cp /etc/os-release /demo-pvc/
查询脚本:定位 Pod 后端 nfs 路径
#!/bin/bash
podName=${1:-deloy-xiuxian-b954d54c5-m72zd}
pvcName=`kubectl get po ${podName} -o jsonpath={.spec.volumes[0].persistentVolumeClaim.claimName}`
pvName=`kubectl get pvc ${pvcName} -o jsonpath={.spec.volumeName}`
nfsPath=`kubectl get pv $pvName -o jsonpath={.spec.nfs.path}`
echo ${podName} ~~~ ${nfsPath}
./pvc-volume.sh deloy-xiuxian-b954d54c5-qwsqz
# deloy-xiuxian-b954d54c5-qwsqz ~~~ /demo/data/nfs-server/pv/linux/pv002
六、PV 回收策略验证
Retain
删除 pvc 后 pv 仍在,状态变为 Released,nfs 数据不会被删除;在管理员手动回收前,其他 Pod 无法直接使用。
Delete
对支持删除的卷插件(AWS EBS、GCE PD、Azure Disk、Cinder)会删除 pv 及数据;nfs 在不使用 sc 时删 pvc 不会删数据,使用 sc 后可以看到删除效果。
Recycle
官方已弃用,动态存储类已不支持。
临时修改回收策略
kubectl patch pv demo-linux-pv03 \
-p '{"spec":{"persistentVolumeReclaimPolicy":"Recycle"}}'
命令行改配置基本是临时的,资源删除重建后仍按资源清单配置。