文件系统

创建存储类

  1. 准备存储类配置文件，如本例中的mysc.yaml文件，存储类配置请参考下方示例文件。

  2. 执行命令，使用配置文件创建StorageClass。

    kubectl apply -f mysc.yaml

  3. 执行命令，查看已创建的StorageClass信息。

    kubectl get sc mysc

    命令结果示例如下：

    NAME   PROVISIONER      RECLAIMPOLICY   VOLUMEBINDINGMODE   ALLOWVOLUMEEXPANSION   AGE
mysc   csi.huawei.com   Delete          Immediate           true                   8s

NFS协议配置示例

容器使用NFS协议对接文件系统资源时，可以参考如下存储类配置示例。该示例中，NFS挂载时指定版本为4.1。

kind: StorageClass
apiVersion: storage.k8s.io/v1
metadata:
  name: mysc
provisioner: csi.huawei.com
parameters:
  backend: nfs-nas-181
  pool: StoragePool001
  volumeType: fs
  allocType: thin
  authClient: "*"
mountOptions:
  - nfsvers=4.1 # NFS挂载时指定版本为4.1

NFS+协议配置示例

容器使用NFS+协议对接文件系统资源时，可以参考如下存储类配置示例。

kind: StorageClass
apiVersion: storage.k8s.io/v1
metadata:
  name: mysc
provisioner: csi.huawei.com
parameters:
  backend: nfs-nas-181
  pool: StoragePool001
  volumeType: fs
  allocType: thin
  authClient: "*"

双活文件系统配置示例

容器使用NFS双活文件系统作为存储资源时，可以参考如下配置示例。该示例中，使用的后端是支持双活的后端，且配置“hyperMetro”参数为“true”。

kind: StorageClass
apiVersion: storage.k8s.io/v1
metadata:
  name: mysc
provisioner: csi.huawei.com
parameters:
  backend: nfs-hypermetro-dorado-181
  pool: pool001
  volumeType: fs
  hyperMetro: "true" # 发放双活卷
  allocType: thin
  authClient: "*"

  • 发放NAS双活卷前，需要在两台存储设备之间配置双活关系，包含远端设备、双活域等，仅支持文件系统双活域工作模式为双活AA模式，配置操作请参考对应存储型号的产品文档。
  • 若存储发生故障，逻辑管理端口可能产生漂移，在漂移状态下删除NAS双活卷后，需手动清理对应的存储资源。

文件系统支持的存储类参数详细说明

表 1 StorageClass配置参数说明

参数

说明

必选参数

默认值

纳管卷是否生效

备注

metadata.name

自定义的StorageClass对象名称。

是

-

是

以Kubernetes v1.22.1为例，支持数字、小写字母、中划线（-）和点（.）的组合，并且必须以字母数字开头和结尾。

provisioner

制备器名称。

是

csi.huawei.com

是

该字段需要指定为安装华为CSI时设置的驱动名称。

取值和values.yaml文件中driverName一致。

reclaimPolicy

回收策略。支持如下类型：

  • Delete：自动回收资源。
  • Retain：手动回收资源。

否

Delete

是

  • Delete：删除PV/PVC时会关联删除存储上的资源。
  • Retain：删除PV/PVC时不会删除存储上的资源。

allowVolumeExpansion

是否允许卷扩展。参数设置为true 时，使用该StorageClass的PV可以进行扩容操作。

否

false

是

此功能仅可用于扩容PV，不能用于缩容PV。

mountOptions

挂载参数列表，可用于指定主机执行mount命令时-o选项的参数。

否

-

是

常见的mountOptions参数参考表2。

也可自行指定其他挂载参数。

parameters.backend

待创建资源所在的后端名称。如果设置parameters.pool，则必须设置本字段。

条件必选

-

否

如果不设置，华为CSI随机选择一个满足容量要求的后端创建资源。

建议指定后端，确保创建的资源在预期的后端上。

parameters.pool

待创建资源所在的存储资源池名称。

否

-

否

如果不设置，华为CSI会在所选后端上随机选择一个满足容量要求的存储池创建资源。建议指定存储池，确保创建的资源在预期的存储池上。

parameters.volumeName

指定动态卷供应创建的存储资源名称。

支持配置占位符对存储资源名称进行自定义，支持的占位符如下：

  • PVC命名空间：{{ .PVCNamespace }}
  • PVC名称：{{ .PVCName }}

否

-

否

  • 支持配置字母、数字、"-"、"_"、"."，不能配置为空，且将占位符展开后的长度范围是1-255。
  • 必须同时配置PVC命名空间和PVC名称。
  • 为了避免资源名称重复，会将PVC UID作为唯一标识符默认添加到名称末尾。

配置示例：

PVC命名空间为："namespace"，PVC名称为："pvc-1"，PVC UID："c2fd3f46-bf17-4a7d-b88e-2e3232bae434"。

volumeName配置为: "prefix-{{ .PVCNamespace }}_{{ .PVCName }}"。

最终存储资源名称为："prefix-namespace_pvc-1-c2fd3f46bf174a7db88e2e3232bae434"。

parameters.volumeType

待创建卷类型。支持如下类型：

  • lun：存储侧发放的资源是LUN。
  • fs：存储侧发放的资源是文件系统。
  • dtree：存储侧发放的资源是Dtree类型的卷

是

-

是

此处固定配置为fs。

parameters.allocType

待创建卷的分配类型。支持如下类型：

  • thin：创建时不会分配所有需要的空间，而是根据使用情况动态分配。
  • thick：创建时分配所有需要的空间。

否

thin

否

配置为thin时，创建卷不会立即分配所有需要的空间，而是根据使用情况动态分配。

OceanStor Dorado不支持thick

parameters.authClient

可访问该卷的NFS客户端IP地址信息。

支持输入客户端主机名称（建议使用全称域名）、客户端IP地址、客户端IP地址段。

必选

-

否

可以使用“*”表示任意客户端。当您不确定访问客户端IP信息时，建议使用“*”防止客户端访问被存储拒绝。

当使用客户端主机名称时建议使用全称域名。

IP地址支持IPv4、IPv6地址或两者的混合IP地址。

可以同时输入多个主机名称、IP地址或IP地址段，以英文分号隔开。如示例："192.168.0.10;192.168.0.0/24;myserver1.test"

parameters.cloneSpeed

克隆速度。支持配置为1~4。

否

3

否

4速度最快。配置克隆持久卷或从快照创建持久卷时生效。

parameters.applicationType

指定创建文件系统时的应用类型名称。

否

-

是

在DeviceManager管理界面，选择“服务 > 文件服务 > 文件系统 > 创建 > 应用类型”，获取应用类型名称。

parameters.qos

PV在存储侧的文件系统的QoS设置。

配置项值是字典格式的JSON字符串（字符串两边由单引号修饰，字典key由双引号修饰）。如：'{"maxMBPS": 999, "maxIOPS": 999}'

否

-

否

支持的QoS配置请参考表3说明。

parameters.hyperMetro

是否创建双活卷。当使用的后端是双活类型的后端需要配置。

  • "true"：创建的卷为双活卷。对接存储后端为双活后端时，该值必须为true。
  • "false"：创建的卷为普通卷。

条件必选

false

否

当使用的后端是双活类型的后端，且需要发放双活卷时，设置该参数为"true"，若设置为"false"，在后端对接的逻辑管理端口漂移的场景下，有业务中断的风险。

parameters.metroPairSyncSpeed

双活Pair同步速率。支持配置为1~4。

可选值：

  • 1：低
  • 2：中
  • 3：高
  • 4：最高

否

-

否

配置创建双活卷时生效。

注意：

  • 未配置该参数时，双活Pair存储速率由存储决定。
  • 最高速率同步时可能导致主机时延增大。

parameters.fsPermission

挂载到容器内的目录权限。

否

-

否

配置格式参考Linux权限设置，如“777”、“755”等。

parameters.rootSquash

用于设置是否允许客户端的root权限。

可选值：

  • root_squash：表示不允许客户端以root用户访问，客户端使用root用户访问时映射为匿名用户。
  • no_root_squash：表示允许客户端以root用户访问，保留root用户的权限。

否

-

否

  

parameters.allSquash

用于设置是否保留共享目录的UID和GID。

可选值：

  • all_squash：表示共享目录的UID和GID映射为匿名用户。
  • no_all_squash：表示保留共享目录的UID和GID。

否

-

否

  

parameters.accesskrb5

用于配置krb5安全协议。

  • read_only：只读
  • read_write：读写
  • none：无权限

否

-

否

挂载时，可以在mountOptions中指定参数sec。

parameters.accesskrb5i

用于配置krb5i安全协议。

  • read_only：只读
  • read_write：读写
  • none：无权限

否

-

否

挂载时，可以在mountOptions中指定参数sec。

parameters.accesskrb5p

用于配置krb5p安全协议。

  • read_only：只读
  • read_write：读写
  • none：无权限

否

-

否

挂载时，可以在mountOptions中指定参数sec。

parameters.snapshotDirectoryVisibility

用于设置快照目录是否可见。

可选值：

  • visible：表示快照目录可见。
  • invisible：表示快照目录不可见。

否

-

否

仅支持NAS存储。

parameters.reservedSnapshotSpaceRatio

用于配置快照预留空间。

参数类型：字符串

取值范围："0"~"50"

否

-

否

支持OceanStor Dorado 6.1.5+、OceanStor 6.1.5+的NAS存储。

parameters.disableVerifyCapacity

是否禁用卷容量校验，禁用后将不校验卷容量是否为扇区大小整数倍。

可选值：

  • "true": 禁用卷容量校验。
  • "false": 开启卷容量校验。
须知：

使用Red Hat OpenShift Virtualization对接CSI时，该参数必须设置为"true"。

否

"true"

是

OceanStor Dorado、OceanStor的扇区大小为512 B。

parameters.description

用于配置创建的文件系统的描述信息。

参数类型：字符串

长度限制：0-255

否

-

否

  

parameters.advancedOptions

高级创卷参数。

配置项值是字典格式的JSON字符串（字符串两边由单引号修饰，字典key由双引号修饰）。如：'{"CAPACITYTHRESHOLD": 90}'

否

-

否

支持的高级参数列表请参考表4说明。

表 2 常用mountOptions参数说明

参数

说明

必选参数

默认值

备注

mountOptions.nfsvers

主机侧NFS挂载选项。支持如下挂载选项：

nfsvers：挂载NFS时的协议版本。支持配置的参数值为“3”，“4”，“4.0”，“4.1”和”4.2”。

否

-

在主机执行mount命令时-o参数后的可选选项。列表格式。

指定NFS版本挂载时，当前支持NFS 3/4.0/4.1/4.2协议（需存储设备支持且开启）。当配置参数为nfsvers=4时，因为操作系统配置的不同，实际挂载可能为NFS 4的最高版本协议，如4.2，当需要使用4.0协议时，建议配置nfsvers=4.0。

mountOptions.sec

用于指定Kerberos 5协议挂载NFS文件系统。

否

-

  • 使用Kerberos 5协议时，请配置krb5。
  • 使用Kerberos 5i协议时，请配置krb5i。
  • 使用Kerberos 5p协议时，请配置krb5p。
  • Kerberos仅支持NFSv4.0及以上版本的NFS协议。
  • OceanStor Dorado和OceanStor 6.1.3及以上版本支持Kerberos。

mountOptions.proto

指定NFS挂载时使用的传输协议。

支持配置参数值为：“rdma”。

否

-

  • OceanStor Dorado和OceanStor 6.1.7及以上的NAS存储。

mountOptions.port

指定NFS挂载时使用的协议端口。

条件必选

-

传输协议方式使用“rdma”时，请设置为：20049。

表 3 支持的QoS配置

存储类型

参数名

参数描述

备注

OceanStor V5

IOTYPE

控制读写类型。

可选参数（未明确指定将使用后端存储默认值，具体参考相关存储资料）。

有效值如下：

  • 0：读I/O
  • 1：写I/O
  • 2：读写I/O

MAXBANDWIDTH

最大带宽限制策略。

单位MB/s，有效值为>0的整数。

MINBANDWIDTH

最小带宽保护策略。

单位MB/s，有效值为>0的整数。

MAXIOPS

最大IOPS限制策略。

有效值为>0的整数。

MINIOPS

最小IOPS保护策略。

有效值为>0的整数。

LATENCY

最大时延保护策略。

单位ms，有效值为>0的整数。

OceanStor Dorado/OceanStor

IOTYPE

控制读写类型。

有效值如下：

  • 2：读写I/O

MAXBANDWIDTH

最大带宽限制策略。

单位MB/s，类型为整数， 范围1~999999999。

MINBANDWIDTH

最小带宽保护策略。

单位MB/s，类型为整数， 范围1~999999999。

MAXIOPS

最大IOPS限制策略。

类型为整数， 范围100~999999999。

MINIOPS

最小IOPS保护策略。

类型为整数， 范围100~999999999。

LATENCY

最大时延保护策略。

单位ms，仅支持配置0.5或1.5。

表 4 支持的高级创卷参数

参数名

参数描述

备注

CAPACITYTHRESHOLD

总空间容量告警阈值。

参数类型，uint64。

默认值和取值范围请参考对应存储产品手册。