管理 GooseFSx 数据预热

最近更新时间:2025-04-28 17:13:12

我的收藏

创建数据预热单次任务

创建数据预热单次任务,是在 GooseFSx 目录与 COS 存储桶之间执行一次数据预热。

前提条件

操作步骤

1. 登录 数据加速器 GooseFS 控制台,进入实例列表。
2. 选择地域,选择目标 GooseFSx 实例。可通过可用区状态类型等快速找到目标实例,或者通过名称关键字模糊匹配搜索出目标实例。
3. 单击实例 ID 或者管理后,选择数据流动 > 数据预热。
4. 单次任务,单击创建单次任务。在弹出的对话框中,进行如下配置。
任务名称:输入易于识别的名称,创建后可修改。
GooseFSx目录:从已与 COS 建立数据流动规则的目录中选择,可前往数据流动规则页进行创建。
数据集:指定流动 GooseFSx 目录的某些数据,通过目录指定 GooseFSx 目录的某个子目录或整个目录,或通过清单指定 GooseFSx 目录的某些文件;数据流动保持 GooseFSx 目录的数据与 COS 存储桶的数据一一对应,数据集也是指定流动 COS 存储桶的对应数据。
若选择通过目录指定,目录路径请输入不以 “/” 开头的、以 “/” 结尾的路径,或不输入。
不输入: 指定 GooseFSx 目录的所有数据;如下图,指定 goosefsx-bj-auto-test-1252246555 目录的所有数据。
bigfile/:指定 GooseFSx 目录下 bigfile/ 子目录的所有数据。
bigfile/pic/:指定 GooseFSx 目录下 bigfile/pic/ 子目录的所有数据。



若选择通过清单指定,清单 URL 请输入清单文件的 COS 默认访问地址,不支持自定义域名,示例:https://fsx-bj-test-125xxx.cos.ap-beijing.myqcloud.com/list/test_list1.txt。
清单文件需要存放在与 GooseFSx 实例同地域的 COS 存储桶,并设置该文件公有读权限。
清单文件每一行是一个文件路径,文件路径是 GooseFSx 目录下的路径,不同文件路径用回车符换行。
如:需要传输该目录下的三个文件: test_dir1/test_file_1.data, test_dir2/test_file_2.data, test_dir3/test_file_3.data,清单将有三行,第一行 test_dir1/test_file_1.data,第二行是 test_dir2/test_file_2.data,第三行是 test_dir3/test_file_3.data。
清单文件格式是 txt 文件。



任务类型
元数据预热:从 COS 存储桶仅预热元数据到 GooseFSx 目录。适用于初次读取性能不敏感等场景。
数据预热:从 COS 存储桶预热数据含元数据到 GooseFSx 目录。适用于高性能访问等场景。
5. 单击确定,后台将自动执行数据预热。
注意:
若 GooseFSx 目录的数据流动模式是按需加载 Lazy-load(自动模式 L),数据集暂不支持通过清单指定,任务类型暂不支持数据预热。
若 GooseFSx 目录的数据流动模式是手动模式,任务类型不支持元数据预热。

删除数据预热单次任务

注意:
您可删除已完成或待执行的数据预热单次任务。但需要注意以下几点:
删除已完成的数据预热单次任务,您将无法查询该任务的相关信息。
删除待执行的数据预热单次任务,即取消该任务。
暂不支持删除执行中的数据预热单次任务。

前提条件

操作步骤

1. 登录 数据加速器 GooseFS 控制台,进入实例列表。
2. 选择地域,选择目标 GooseFSx 实例。可通过可用区状态类型等快速找到目标实例,或者通过名称关键字模糊匹配搜索出目标实例。
3. 单击实例 ID 或者管理,选择数据流动 > 数据预热
4. 单次任务列表,选择目标任务,或通过条件过滤筛选目标任务;或勾选多个任务,执行批量删除。

查询数据预热单次任务

前提条件

操作步骤

1. 登录 数据加速器 GooseFS 控制台,进入实例列表。
2. 选择地域,选择目标 GooseFSx 实例。可通过可用区状态类型等快速找到目标实例,或者通过名称关键字模糊匹配搜索出目标实例。
3. 单击实例 ID 或者管理,选择数据流动 > 数据预热
4. 单次任务列表,选择目标任务,或通过条件过滤筛选目标任务,单击详情,可查看详细信息。

复制数据预热单次任务

前提条件

操作步骤

1. 登录 数据加速器 GooseFS 控制台,进入实例列表。
2. 选择地域,选择目标 GooseFSx 实例。可通过可用区状态类型等快速找到目标实例,或者通过名称关键字模糊匹配搜索出目标实例。
3. 单击实例 ID 或者管理,选择数据流动 > 数据预热
4. 单次任务列表,选择目标任务,或通过条件过滤筛选目标任务,单击复制任务操作。
5. 在弹出的对话框中,可对复制后的任务进行相应的修改。

创建数据预热周期任务

周期任务,周期性自动触发执行,例如,每间隔1小时自动预热,将从 COS 预热数据到 GooseFSx,适用于及时同步 COS 存储桶的数据变化等场景。
周期任务列表,可看到已创建的周期任务,可进行增加、删除、查询等管理操作。
周期任务触发的预热任务,将出现在单次任务的列表中,均以周期任务名称来命名,通过任务 ID 来区分。

前提条件

操作步骤

1. 登录 数据加速器 GooseFS 控制台,进入实例列表。
2. 选择地域,选择目标 GooseFSx 实例。可通过可用区状态类型等快速找到目标实例,或者通过名称关键字模糊匹配搜索出目标实例。
3. 单击实例 ID 或者管理,选择数据流动 > 数据预热
4. 周期任务页面,单击创建周期任务。在弹出的对话框中,进行如下配置。
任务名称:输入易于识别的名称,创建后可修改。
触发周期
每小时:每间隔一小时执行一次。
每天:每间隔一天执行一次。
每周:每间隔一周执行一次。
每月:每间隔一月执行一次。
GooseFSx 目录:从已与 COS 建立数据流动规则的目录中选择,可前往实例详情页进行创建。
目标路径:指定需要预热的目录路径,比如,该 GooseFSx 目录、或该 GooseFSx 目录下的某个子目录。
任务类型
元数据预热:从 COS 存储桶仅预热元数据到 GooseFSx 目录。适用于初次读取性能不敏感等场景。
数据预热:从 COS 存储桶预热数据含元数据到 GooseFSx 目录。适用于高性能访问等场景。
5. 单击确定即可。
注意:
若 GooseFSx 目录的数据流动模式是按需加载 Lazy-load(自动模式 L),暂不支持周期任务。
若 GooseFSx 目录的数据流动模式是手动模式,任务类型不支持元数据预热。