批量数据处理

最近更新时间:2025-06-24 22:23:12

我的收藏

简介

数据万象支持对对象存储(Cloud Object Storage,COS)中的存量数据进行批量处理,您可以指定某一条数据工作流或独立的任务节点为存量数据进行批量处理。

操作步骤

创建批量数据处理任务

2. 在左侧导航栏中,单击存储桶管理,进入存储桶管理页面。
3. 单击需操作的存储桶名称或右侧操作栏的管理,进入相应存储桶页面。
4. 在左侧导航栏中,单击任务与工作流 > 批量数据处理
5. 单击创建批量数据处理任务,进入创建批量数据处理页面。
6. 在创建批量数据处理页面,配置如下信息。



任务名称:必填项,仅支持字母、数字、中文、_ 和 - 的组合,长度不超过128字符。
输入存储桶:默认项,即为当前存储桶。
范围:确定批量处理的数据范围,默认为当前存储桶文件列表。
按时间过滤:选择系统默认音视频过滤规则、图片文件规则或自定义需要进入工作流的文件规则,也可选择所有文件,对存储桶内所有对象进行处理。
按前缀过滤:扫描指定前缀下的文件进行处理设置中指定的操作。
处理类型:为指定范围内的数据设置操作,支持选择工作流或独立节点,选择独立节点时配置可参考 任务
选择工作流:选择需要执行的工作流。

查看批量数据处理任务执行情况

1. 进入批量数据处理页面,找到目标工作流,并在操作栏中单击执行结果



2. 当处理类型为工作流时,单击执行结果将会进入执行记录 > 工作流执行结果
3. 当处理类型为独立节点时,单击执行结果将会进入执行记录 > 任务结果