批处理作业

最近更新时间:2019-11-18 18:11:47

启动批处理作业

前提条件

  • 准备好需要批量处理的数据,并上传至 COS 目录。
  • 已在 COS 创建至少1个空文件夹,用户存储批处理作业预测输出的内容。

配置服务启动基本信息

服务名称: 创建服务的名称。
资源组:选择服务运行占用的资源组(资源组详细介绍请看 资源组管理)。
模型服务配置: 本服务对应的模型服务配置信息,由 创建模型服务配置 步骤确定。
输入数据:选择输入数据的 COS 路径,即您上传数据的 COS 目录,只能选择文件夹。
数据类型:用户输入数据的输入格式类型,给定作业的所有输入数据必须使用相同的数据格式,目前仅支持 JSON 格式的数据。
Batchsize:选择用户输入数据的批处理大小。
输出数据:选择批量预测结果的保存位置,可以选择您创建的空文件夹。

实例资源配置

TI-EMS 针对不同的模型服务运行资源需求为您提供了【CPU 配置】和【GPU 配置】,若您选择在公共资源组启动服务,则需要选择 CPU quota 和 GPU quota 并指定对应 quota 的数量,公共资源组的服务计费方式按照 quota 单价 * 数量 * 服务运行时长(公共资源组计费方式暂未开放,目前仅对白名单用户开放免费使用);若您选择在专用资源组启动服务,则需自定义 CPU 配置和 GPU 配置,用户在预购的专用资源组启动的服务不再另外收费。

设定实例数量: 设定批处理作业启动时占用的实例数量,实例数量最小设置为1。
实例配置完成后,单击【启动服务】,即可快速启动批处理作业,并跳转到批处理作业列表页面。

管理批处理作业

停止作业

单击列表右侧的【停止】,正在运行的作业会启动停止程序,服务所占用的资源即被释放。

注意:

已停止的批处理作业不可再次启动。

删除作业

单击列表右侧的【更多】>【删除】,即可删除对应的批处理作业。

注意:

正在运行的作业不可以直接删除,需要先停止该作业,才可以删除。

日志

TI-EMS 支持查看单个作业不同实例的日志,用户可通过日志数据窗口查看各作业的运行日志。