在日常学习测试kubernetes时,经常需要PersistentVolume把一些数据(例如:数据库、日志等)存储起来,不随着容器的删除而丢失;关于PV、PVC、StorageClass的关系参考PV/PVC/StorageClass;存储卷的实现有很多种,此处选择比较容易实现的NFS作为存储;参考了网上好多资料,但都是不太完整,按照资料上的说明操作都有问题,所以在参考了众多资料之后决定记录一下过程,以供各位参考。
环境:centos-7(3.10.0-957.5.1.el7.x86_64)(node1, node2)kubernetes v1.13.0helm v2.12.0
安装环境
安装kubernetes、helm
参考资料,在node1、node2上安装kubernetes和helm;
安装NFS
- 在node1上安装NFS Server
$ sudo yum -y install nfs-utils rpcbind
- 在服务端node1上配置共享目录
$ sudo mkdir /var/nfs
$ sudo su //切换到root用户
$ echo "/var/nfs 192.168.0.0/24(rw,async,no_root_squash,no_all_squash,sync)" >> /etc/exports //配置共享目录
$ exit //退回原来用户
$ exportfs -r //让上面的配置生效
- 在服务端启动NFS服务
//必须先启动rpcbind服务,再启动nfs服务,这样才能让nfs服务在rpcbind服务上注册成功
$ sudo systemctl start rpcbind
$ sudo systemctl start nfs-server
检查服务是否启动成功
$ showmount -e localhost
Export list for localhost:
/var/nfs 192.168.0.0/24
设置开机启动
$ sudo systemctl enable rpcbind
$ sudo systemctl enable nfs-server
在客户端node2安装nfs-utils
**注意:所有kubernetes机器都需要安装nfs-utils,我就是没有在客户端安装nfs-utils,才卡在怎么测试PV、StorageClass、PVC都不通;
$ sudo yum install nfs-utils
可以参考资料,在客服端上测试NFS共享存储;
NFS作为动态存储卷
参考资料,在node1上使用helm安装NFS-Client Provisioner
$ helm install stable/nfs-client-provisioner --set nfs.server=x.x.x.x --set nfs.path=/exported/path --name nfs-client-provisioner
它会安装一个StorageClass
$ kubectl get sc
NAME PROVISIONER AGE
nfs-client cluster.local/nfs-client-provisioner 32h
设置默认StorageClass
使用PVC的时候需要创建并指定PV;如果没有创建PV,就会使用默认的StorageClass来创建相应的PV;否则PVC一直都是Pending的状态;
把上面创建StorageClass设置为默认的
$ kubectl patch storageclass nfs-client -p '{"metadata": {"annotations":{"storageclass.kubernetes.io/is-default-class":"true"}}}'
$ kubectl get sc
NAME PROVISIONER AGE
nfs-client (default) cluster.local/nfs-client-provisioner 32h
现在你可以尽情使用PVC了,而不用在去手动创建PV和StorageClass了;
参考资料(谢谢各位作者):
https://blog.csdn.net/jettery/article/details/72722324https://www.kubernetes.org.cn/4956.htmlhttps://www.kubernetes.org.cn/4022.htmlhttps://blog.51cto.com/passed/2160149https://blog.51cto.com/fengwan/2176889https://github.com/kubernetes-incubator/external-storage/tree/master/nfs-clienthttps://k8smeetup.github.io/docs/tasks/administer-cluster/change-default-storage-class/