专栏首页新智元谷歌开源超大型视频数据库,含800万视频 (附技术报告)

谷歌开源超大型视频数据库,含800万视频 (附技术报告)

9月28日,谷歌在官方博客上宣布,将含有800万个Youtube 视频URL 的视频数据库开源,视频总时长达到了50万个小时。一并发布的还有从包含了4800个知识图谱分类数据集中提取的视频级别标签。

这一数据库在规模和覆盖的种类上都比现有的视频数据库有显著提升。例如,较为著名的Sports-1M数据库,就只由100万个Youtube 视频和500个运动类目。谷歌官方博客上说,在视频的数量和种类上,Youtube-8M代表的是几乎指数级的增长。

“为了保证标签视频数据库的稳定性和质量,我们只采用浏览量超过1000的公共视频资源,随后,我们会构建一个多样化的词汇类目,这一类目在视觉上是可以观察得到的,也足够频繁。词汇的构建结合了频次分析、自动过滤、人为评价验证,并分为24个垂直分类”,谷歌博客写道。

下图是数据集的首页截图,展示了数据集的规模和多样性。

要在Youtube-8M 规模的数据库上理解视频,一般要求千万亿字节的视频存储和几十个CPU的消耗。未来让受计算机资源所限的研究者和学生也可以用上这一数据库,谷歌们对视频进行了预处理,并提取了帧级别的特征。使用的是最新的深度学习技术——通过ImageNet训练的开源 Inception-V3 图像注释模型。

这些特征的提取是在1帧每秒的瞬时分辨率上完成,从190万个视频帧中提取,并被压缩到可以放到一个硬盘中(小于1.5T)。

这样以来,只需要不到一天的时间,就可以下载这一数据库并在训练一个基本的TensorFlow模型。

本文分享自微信公众号 - 新智元(AI_era)

原文出处及转载信息见文内详细说明,如有侵权,请联系 yunjia_community@tencent.com 删除。

原始发表时间:2016-09-29

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 谷歌AI动画接龙:只用头尾两帧图像,片刻生成完整视频!

    想象一下,现在你的手中有一段视频的第一帧和最后一帧图像,让你负责把中间的图像填进去,生成完整的视频,从现有的有限信息中推断出整个视频。你能做到吗?

    新智元
  • 【ACL2018】腾讯AI Lab入选5篇论文解读:神经机器翻译、情感分类等

    【新智元导读】第 56 届计算语言学协会年会ACL 2018 将于当地时间7 月15-20 日在澳大利亚墨尔本举办。腾讯AI Lab 今年共有 5 篇论文入选,...

    新智元
  • Facebook AI Research首次开源ICCV冠军模型!视频识别与行为检测最新利器PySlowFast来了

    Facebook AI Research在近期的博文中公布了其在ICCV研讨会最新开源的视频理解代码库: PySlowFast。其代码库可帮助使用者在视频识别(...

    新智元
  • 为什么我们需要短视频软件开发,短视频究竟给我们带来了什么

    短视频软件开发作为泛娱乐时代流行的娱乐方式,正逐渐深入到人们的日常生活中,逐渐成为一种文化现象,对于大多数人来说,短视频软件开发已经互鉴成为最重要的社交方式。短...

    云豹kj的晨曦
  • 爬虫结合自动化实战,帮助小姐姐刷抖音完全解放掉双手

    本篇文章将大家利用 自动化与爬虫,精准地刷抖音,完全解放自己的双手,做一回真正的懒人

    AirPython
  • 如何用Python自动操作数据库?

    我在使用 Python 之前,做数据分析工作的流程,一般是先打开数据库客户端,然后运行一段写好的 SQL 语句,把数据查询出来,然后再把数据复制到 Excel ...

    数据森麟
  • 视频上云解决方案EasyCVR发布linux版本

    视频行业发展到现在,已经不再满足于网页观看,视频上云直播成为越来越多企业的需求。视频智能化是系统建设的演化方向,以视频为核心、依靠智能物联场景的云架构,对实现资...

    EasyNVR
  • TiDB 在金融场景里面那些不得不说的事

    本文以银行业数据库架构演进为契机,结合商业银行的核心业务,探讨未来商业银行的技术发展趋势和机遇。

    PingCAP
  • 【Linux_Shell 脚本编程学习笔记二、打印菜单】

         1、当用户输入1时,输出 “start installing lamp.” 然后执行 /server/script/lamp.sh, 脚本内容输出 ...

    梅花
  • popcorn-js视频Video框架简单用法

    <div> <video class="video" id="ourvideobig" preload="auto" control...

    纯粹是糖

扫码关注云+社区

领取腾讯云代金券