文件存储 CPFS：CreateDataFlow - 创建数据流动

基础操作

• CPFS 智算版 2.4.0 及以上版本支持数据流动。
• CPFS 智算版状态为运行中，才能创建数据流动。
• 一个 CPFS 智算版文件系统最大允许创建 10 个数据流动。
• 创建数据流动一般耗时 2～5 分钟，您可通过 DescribeDataFlows 检查数据流动创建是否完成。

权限

创建数据流动时，CPFS 智算版会获取AliyunServiceRoleForNasOssDataflow和AliyunServiceRoleForNasEventNotification两个服务关联角色。更多信息，请参见 CPFS 服务关联角色。

CPFS 智算版使用说明

• 源端存储

  • 源端存储仅支持 oss。数据流动的源端存储（SourceStorage）必须是 OSS Bucket。
  • CPFS 智算版数据流动支持加密和非加密两种方式访问 OSS。选择加密（SSL）方式访问 OSS 时，需确认 OSS Bucket 的传输加密支持加密访问方式。
  • 如果多个 CPFS 智算版的数据流动、或者同一个 CPFS 智算版的多个数据流动的源端存储是同一个 OSS Bucket，为了防止多个 CPFS 智算版向同一个源导出数据产生数据冲突，需要该 OSS Bucket 开启版本控制。
  • 不支持跨地域的 OSS 数据流动，OSS Bucket 必须与 CPFS 文件系统在同一个地域。
  • CPFS 智算版 2.6.0 及以上版本支持使用跨账号 OSS 进行数据流动的创建。
  • 只有在使用跨账号的 OSS 时，需要设置 account id 参数。
  • 使用跨账号的 OSS 时，需要先进行账号授权。具体授权请参考跨账号数据流动授权。
    说明 创建数据流动前，您需要先给源端 OSS Bucket 设置标签（key: cpfs-dataflow, value: true），以便 CPFS 智算版数据流动访问该 Bucket 的数据。在数据流动的使用过程中，不能删除和修改该标签，否则 CPFS 智算版数据流动无法访问 Bucket 的数据。

• 数据流动对文件系统的限制

  • 在数据流动关联的文件系统路径中，不可对非空目录执行重命名操作，否则报错 Permission Denied 或者目录非空。
  • 目录、文件名中的特殊字符需要谨慎使用，支持大小写字母、数字、感叹号（！）、短划线（-）、下划线（_）、半角句号（.）、星号（*）和半角圆括号（()）。
  • 不支持超长路径，数据流动支持的路径最大长度是 1023 字符。

• 数据流动导入限制

  • Symlink 类型的文件导入到 CPFS 智算版后，会转变为包含数据的普通文件，并丢失 Symlink 信息。
  • 如果 OSS Bucket 存在多个版本，则只复制最新的版本。
  • 不支持长度大于 255 字节的文件名或子目录名。

• 数据流动导出限制

  • Symlink 类型的文件在同步到 OSS 后，不会同步 Symlink 所指向的文件，而是会变成一个普通的无数据空白对象。
  • Hardlink 类型的文件仅作为普通文件同步到 OSS。
  • Socket、Device、Pipe 类型的文件导出到 OSS Bucket 时，会变成一个普通的无数据空白对象。
  • 不支持长度大于 1023 字符的目录路径。