ACK Edge集群Pro版支持LVM(Logical Volume Manager)本地存储,提供自动化的逻辑卷生命周期管理能力,且能根据节点LVM本地存储容量进行调度。您只需定义节点本地盘的拓扑关系,即可通过原生PVC/PV方式使用LVM本地存储。本文介绍如何在ACK Edge集群Pro版中使用LVM本地存储。
前提条件
集群的节点有可用的本地数据盘。
从云端节点能访问部署存储的节点的TCP 1736端口。
安装node-resource-manager、csi-plugin和csi-provisioner组件
登录容器服务管理控制台,在左侧导航栏选择集群。
在集群列表页面,单击目标集群名称,然后在左侧导航栏,选择 。
在组件管理页面的存储页签,找到node-resource-manager、csi-plugin和csi-provisioner组件,单击安装。
在提示对话框中单击确定。
配置节点VolumeGroup
为了保障数据安全,组件不会对VolumeGroup和Physical Volume进行删除。如果需要重新定义VolumeGroup,您需要先自行清理。
使用如下YAML文件样例配置ConfigMap,指定节点VolumeGroup拓扑配置。
apiVersion: v1 kind: ConfigMap metadata: name: node-resource-topo namespace: kube-system data: volumegroup: |- volumegroup: - name: volumegroup1 key: kubernetes.io/storagetype operator: In value: lvm topology: type: device devices: - /dev/sdb1 - /dev/sdb2 - /dev/sdc
参数解释如下:
参数
说明
name
VolumeGroup的名称。
key
匹配集群节点标签中的key的值。
operator
集群定义的
Labels selector operator
,主要包含如下四种操作符:In:只有
value
的值与集群节点标签中的key对应的value
值相同时才会匹配。NotIn:只有
value
的值与集群节点标签中的key对应的value
值不相同时才会匹配。Exists:集群节点标签存在key就会匹配。
DoesNotExist:集群节点标签不存在key就会匹配。
value
匹配Kubernetes Node Labels的key对应的
value
的值。topology
节点上设备拓扑关系,其中
topology.devices
指定节点上的本地盘路径,该设备将被加到VolumeGroup中。给节点打标。
按步骤1中的标签规则给相应存储节点添加对应自定义标签,以指定符合相应拓扑的节点类型。如步骤1中对应的标签为:
kubernetes.io/storagetype=lvm
。给存储节点添加固定标签:
alibabacloud.com/edge-enable-localstorage='true'
,使本地存储管理组件能调度到该节点。
节点上的node-resource-manager组件将根据以上配置,自动创建对应的Physical Volume,并将其加入到VolumeGroup中。
使用LVM本地存储
使用以下YAML文件样例创建PVC指定StorageClass,并执行kubectl apply -f ****.yaml
命令。一个PVC对应节点上一块逻辑卷,Pod创建成功后将挂载该逻辑卷。
集群默认的storageClassName
为csi-local-lvm
。
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
name: lvm-pvc-test
spec:
accessModes:
- ReadWriteOnce
resources:
requests:
storage: 50Mi
storageClassName: csi-local-lvm
---
apiVersion: apps/v1
kind: Deployment
metadata:
labels:
k8s-app: local-test
name: local-test
namespace: default
spec:
replicas: 1
selector:
matchLabels:
k8s-app: local-test
template:
metadata:
labels:
k8s-app: local-test
spec:
hostNetwork: true
containers:
- image: nginx:1.15.7-alpine
imagePullPolicy: IfNotPresent
name: nginx
resources: {}
volumeMounts:
- name: local-pvc
mountPath: /data
dnsPolicy: ClusterFirst
restartPolicy: Always
tolerations:
- operator: Exists
nodeSelector:
alibabacloud.com/is-edge-worker: "true"
volumes:
- name: local-pvc
persistentVolumeClaim:
claimName: lvm-pvc-test
执行以下命令,查看逻辑卷是否挂载成功。
kubectl exec -it local-test-564dfcf6dc-qhfsf sh
/ # ls /data
预期输出:
lost+found
预期输出表明,逻辑卷已成功挂载在Pod上。