7. 部署NFS文件存储

# 环境规划

| 主机名        | ip             | 角色       |
|------------|----------------|----------|
| tiaoban    | 192.168.10.100 | nfs存储服务器 |
| k8s-master | 192.168.10.10  | nfs客户端   |
| k8s-work1  | 192.168.10.11  | nfs客户端   |
| k8s-work2  | 192.168.10.12  | nfs客户端   |

# 部署nfs服务(nfs存储服务器)

```
# 安装nfs服务
dnf install -y nfs-utils
# 创建目录授权
mkdir -p /data/nfs
chmod 666 /data/nfs
chown nobody /data/nfs
# 导出文件系统
cat > /etc/exports << EOF
/data/nfs *(rw,sync,insecure,no_subtree_check,no_root_squash)
EOF
# 启动服务
systemctl start nfs-server
systemctl enable nfs-server
# 查看验证
exportfs -rv
```

>/data/nfs *(rw,sync,insecure,no_subtree_check,no_root_squash)说明：
- /data/nfs： nfs server 目录
- \*: 表示所有的服务器都可以挂载该nfs，当然也可以指定ip地址/ip地址段
- rw： 读写权限
- sync：同步写入,即数据写入服务器后再返回响应，保证数据的可靠性和一致性
- insecure： 表示不进行端口校验，允许客户端使用非保留端口进行连接
- no_subtree_check: 禁止子树检查
- no_root_squash: 表示禁用 root 用户映射机制，即来自客户端的 root 用户被映射为匿名用户而没有特权

# 客户端测试(nfs客户端)

```
# 安装软件包
dnf install -y nfs-utils
# 测试挂载
showmount -e 192.168.10.100
mount -t nfs 192.168.10.100:/data/nfs /mnt
```

External NFS部署(ks8 master)
项目地址：https://github.com/kubernetes-sigs/nfs-subdir-external-provisioner
```
# 添加helm repo仓库
helm repo add nfs-subdir-external-provisioner https://kubernetes-sigs.github.io/nfs-subdir-external-provisioner/

# 创建命名空间
kubectl create ns nfs

# 在线安装nfs（不建议，国内无法正常拉取镜像）
# helm install nfs nfs-subdir-external-provisioner/nfs-subdir-external-provisioner -n nfs --set nfs.server=192.168.10.100 --set nfs.path=/data/nfs

# 离线下载到本地
helm pull nfs-subdir-external-provisioner/nfs-subdir-external-provisioner --untar

# 将镜像地址修改为代理地址
sed -i 's#repository:.*#repository: k8s.localvps.top/sig-storage/nfs-subdir-external-provisioner#g' \
nfs-subdir-external-provisioner/values.yaml

# 离线安装nfs
helm  install -n nfs nfs ./nfs-subdir-external-provisioner/ -f nfs-subdir-external-provisioner/values.yaml --set nfs.server=192.168.88.62 --set nfs.path=/data/nfs

# 查看已安装列表
helm list -n nfs

# 查看nfs空间下的pod状态
kubectl get pod -n nfs
```

# 使用测试

创建pvc资源清单
```
# 创建pvc配置文件
cat > pvc.yaml << EOF
kind: PersistentVolumeClaim
apiVersion: v1
metadata:
  name: test-pvc
spec:
  storageClassName: nfs-client
  accessModes:
    - ReadWriteMany
  resources:
    requests:
      storage: 10Mi
EOF

# 创建pvc
kubectl apply -f pvc.yaml

# 查看pvc状态
kubectl get pvc

# 查看pv状态
kubectl get pv
```

创建pod使用pvc
```
cat > pod.yaml << EOF 
apiVersion: v1
kind: Pod
metadata:
  name: redis
  labels:
    name: redis
spec:
  containers:
  - name: redis
    image: redis:latest
    resources:
      limits:
        memory: "128Mi"
        cpu: "500m"
    ports:
      - containerPort: 6379
    volumeMounts:
      - name: redis-data
        mountPath: "/data"
  volumes:
    - name: redis-data
      persistentVolumeClaim:
        claimName: test-pvc
EOF

# 创建pod
kubectl apply -f pod.yaml

# 查看pod
kubectl get pod
```

进入pod添加测试数据
```
kubectl exec -it redis -- redis-cli
127.0.0.1:6379> set key hello
OK
127.0.0.1:6379> get key
"hello"
127.0.0.1:6379> exit
```

重启pod，测试数据持久化
```

# 删除指定pod
kubectl delete pod redis

# 再次创建pod
kubectl apply -f pod.yaml

# 测试数据持久化
kubectl exec -it redis -- redis-cli
127.0.0.1:6379> get key
"hello"
127.0.0.1:6379> exit
```