部署数据流动
步骤1: 创建数据流动

步骤2:填写数据流动相关配置

关键参数说明:
步骤3:查看数据流动关系

管理数据流动任务
步骤1:创建数据管理任务

步骤2:填写数据管理任务配置

关键参数说明:
参数 | 详细说明 |
子任务类型 | 元数据导入:仅导入指定路径的元数据,不实际导入数据,如访问到此数据后端会触发异步拉取。 数据预热:仅对元数据已经在 cfs turbo 中的部分生效,触发预热任务后,机会将数据加载到文件系统内。 说明: 对于元数据不在文件系统内的,无法触发预热的任务。 数据释放:仅对元数据已经在 cfs turbo 中的部分生效,能主动释放在文件系统的数据,完成容量的清理。 说明: 对于没有和对象存储建立过映射关系的文件,释放任务会跳过对此类文件操作,不会造成数据丢失。 和对象存储建立完数据流动映射后,若文件系统内数据未做修改,请确保对象存储中的数据始终存在,避免数据释放产生的损失。 对于 Turbo 文件系统中修改后的数据,需导出后才能触发释放。 数据导出:仅对从 Turbo 文件系统写入的数据生效,通过导出任务,支持将数据反向导出至对象存储。 说明: 导出后元数据和数据均保留在文件系统内,如果需要清理,可操作数据释放任务。 如果对象存储与文件存储中文件不一致,会直接覆盖对象存储数据,建议您启动任务前,开启对象存储的版本管理。 |
数据流动任务 ID | 仅支持对已经建立了数据流动映射的目录做操作, |
文件系统路径 | 所有任务类型的目标均指向文件系统内的路径,对象存储中的路径会基于映射的关系,进行匹配和拼接。 基于目录操作,请保持 / 结尾(元数据仅支持路径导入)。对单个文件请填写完整路径,支持做预热、释放、导出。 示例:对象存储 1/2/3/ 路径,映射至文件系统 /a/b/c/ ,对文件系统/a/b/c/d/ 路径执行相关操作,会映射至对象存储1/2/3/d/ 。 |
查看数据管理任务
步骤1:进入数据管理任务列表页

步骤2:查看任务详情,并导出清单
说明:
元数据导入任务,因数据量通常较大,为避免产生清单的时间过长。仅支持查看文件总数和失败总数。清单导出上,仅支持导出失败任务列表,不支持导出总量和已处理列表。
元数据导入因不涉及数据容量,因此仅提供文件数量相关信息,不提供文件容量相关信息。
