前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >数据工作流 | 一站式云上数据智能解决方案

数据工作流 | 一站式云上数据智能解决方案

作者头像
云存储
发布2021-04-23 20:58:48
7230
发布2021-04-23 20:58:48
举报
文章被收录于专栏:腾讯云存储腾讯云存储

随着全球数字化进程的加速推进,以及 5G、人工智能等技术的快速发展,全球数据量飞速增长。根据国际权威机构 Statista 的预测¹,2025年全球数据产生量预计达到 175ZB(ZB 为字节计量单位,1ZB = 1012GB),而到2035年,这一数据将达到 2142ZB。

然而,数据作为重要战略资源,尚未得到充分有效的利用。根据 IDC 和希捷科技²的调研预测,未来两年,企业数据将以 42.2% 的速度保持高速增长。但是呢,仅有 32% 的数据得到了利用,企业数据管理仍然面临着诸多问题。

① 数据工作流全新上线!

如何上传时自动触发数据分析处理?

如何灵活组合复杂的多步数据处理逻辑?

如何高效处理大量并发的数据分析任务?

针对上述问题,腾讯云 COS 全新推出了一套完整的端到云到端的数据存储、处理、发布等“一站式”云上智能解决方案——数据工作流。通过数据工作流,您可以快速、灵活、按需搭建数据处理流程(如转码、水印、拼接、截图等),工作流将复杂的数据处理逻辑流程化、实例化、模版化,用户只需要关注处理任务的流程顺序编排,对上传到 COS 的文件按照指定的工作流进行自动化处理,避免了复杂的逻辑开发以及并发处理工作。

② 如何使用工作流

数据工作流的使用流程如下:

第一步,用户在控制台上配置工作流。工作流配置提供图形化界面,方便用户直观便捷的构建数据处理流程,同时提供了转码、水印、截帧、拼接、转动图、智能封面、语音识别、文档预览等丰富的 AI 处理能力,用户可以自定义处理参数,也可以使用预置的处理模版来配置处理任务。工作流支持多个处理串行、并行操作,以便用户灵活编排任务处理流程。

第二步,用户上传数据文件到 COS。

第三步,自动触发数据工作流执行。工作流通过 COS 上传触发执行或 API 手动触发执行,覆盖数据处理的各种使用场景。当触发工作流执行后,任务会进入队列中进行排列,根据优先级和提交顺序依次执行。

  • 上传数据到 COS 触发工作流 工作流与 COS 存储桶的一个路径绑定,当文件上传至该路径时,该工作流就会被自动触发,执行指定的处理操作,并将处理结果自动保存至输出存储桶的指定路径下。
  • API 单次触发工作流 如果用户希望对单个对象或者一类对象进行处理,可以通过 API 手动触发的方式,来指定某个对象(需存储在 COS 中)立即执行某个特定的工作流。

第四步,数据处理完后发送消息给用户。数据处理成功后会将处理结果自动保存至输出存储桶的指定路径下,并将工作流的处理结果按照回调配置发送到指定的回调地址。同时,用户可以登录控制台查看具体工作流的执行情况,以及工作流中各个任务节点的执行情况。

③ 数据工作流的优势

④ 数据工作流使用场景

⑤ 数据工作流实践

数据工作流作为一种功能强大、灵活易用的数据处理云上智能解决方案,在不同的场景下有不同的应用方案。

实践场景一:视频多终端适配

视频多终端适配,需要同时对源文件转码成不同规格的视频,适配PC、TV以及移动终端等多平台播放。转码的同时可以添加视频点播平台的水印,保护视频版权。

实践场景二:视频封面生成

视频网站每天有大量视频展示,用户可以使用智能封面或视频截帧功能生成视频封面,视频截帧支持自定义截帧模式和平均截帧模式。同时,用户可以使用视频转动图功能生成视频的动图封面,优化用户体验,

实践场景三:智能拼接

广告及电商平台部分场景需要智能拼接能力,例如使用音视频拼接来加片头和片尾广告;使用视频水印功能(集成在音视频转码中)为视频添加水印 LOGO。视频水印支持图片水印和文字水印,图片水印可设置为前景水印或背景图。

⑥ 数据工作流等你来撩

数据工作流支持以下功能。您在使用过程中有任何问题,欢迎提出产品改进建议,感谢您的支持!

数据来源:Statista,2020年11月。 数据来源:希捷《数据新世界》调研,IDC,2020年。

本文系转载,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文系转载前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • ① 数据工作流全新上线!
  • ② 如何使用工作流
  • ③ 数据工作流的优势
  • ④ 数据工作流使用场景
  • ⑤ 数据工作流实践
    • 实践场景一:视频多终端适配
      • 实践场景二:视频封面生成
        • 实践场景三:智能拼接
        • ⑥ 数据工作流等你来撩
        相关产品与服务
        对象存储
        对象存储(Cloud Object Storage,COS)是由腾讯云推出的无目录层次结构、无数据格式限制,可容纳海量数据且支持 HTTP/HTTPS 协议访问的分布式存储服务。腾讯云 COS 的存储桶空间无容量上限,无需分区管理,适用于 CDN 数据分发、数据万象处理或大数据计算与分析的数据湖等多种场景。
        领券
        问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档