专栏首页arxiv.org翻译专栏TASM:基于瓦片的视频分析存储管理器(CS DB)
原创

TASM:基于瓦片的视频分析存储管理器(CS DB)

产生的视频数据量正在迅速增加。同时,机器学习和计算机视觉方面的进步使应用程序能够对视频内容进行查询。例如,鸟类学应用可以从自然视频中检索出各种鸟类。然而,现代视频数据管理系统将视频存储为一个单一的编码文件,这并没有提供优化视频空间子集查询的机会。我们建议利用现代视频编解码器中的一个称为 "瓷砖 "的功能来实现对编码视频的空间随机访问。我们介绍了瓦片感知存储管理器 TASM 的设计,并描述了它用于优化各种查询工作负载的视频物理布局的技术。我们展示了 TASM 如何在工作负载已知的情况下显著提高视频查询的性能,以及它如何在工作负载未知的情况下逐步调整视频的物理布局以提高性能。由 TASM 选取的布局在保持良好质量的前提下,将单个查询的速度平均提高了 51%,最高可达 94%。

原文题目:TASM: A Tile-Based Storage Manager for Video Analytics

原文:The amount of video data being produced is rapidly growing. At the same time, advances in machine learning and computer vision have enabled applications to query over the contents of videos. For example, an ornithology application may retrieve birds of various species from a nature video. However, modern video data management systems store videos as a single encoded file, which does not provide opportunities to optimize queries for spatial subsets of videos. We propose utilizing a feature in modern video codecs called "tiles" to enable spatial random access into encoded videos. We present the design of TASM, a tile-aware storage manager, and describe techniques it uses to optimize the physical layout of videos for various query workloads. We demonstrate how TASM can significantly improve the performance of queries over videos when the workload is known, as well as how it can incrementally adapt the physical layout of videos to improve performance even when the workload is not known. Layouts picked by TASM speed up individual queries by an average of 51% and up to 94% while maintaining good quality.

原文作者:Maureen Daum, Brandon Haynes, Dong He, Amrita Mazumdar, Magdalena Balazinska, Alvin Cheung

原文地址:https://arxiv.org/abs/2006.02958

原创声明,本文系作者授权云+社区发表,未经许可,不得转载。

如有侵权,请联系 yunjia_community@tencent.com 删除。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 训练时间降低90%以上!世界最大的芯片WSE有望打破AI计算瓶颈

    人工智能计算机初创公司Cerebras Systems CEO兼联合创始人Andrew Feldman表示,如今的人工智能仅仅只是开始。

    新智元
  • 更大意味着更好吗?Cerebras史上最强深度学习计算机诞生始末

    如今,时间刚过去1个多月,在洛斯阿尔托斯的Cerebras总部,一些客户已经通过光纤电缆将他们的数据输入了4台CS-1计算机进行训练,这些64厘米高的机器不停地...

    大数据文摘
  • SVN版本控制服务

    SVN是Subversion的简称,是一个开放源代码的版本控制系统,相较于CVS,它采用了分支管理系统,它的设计目标就是取代CVS。互联网上很多版本控制服务已从...

    胡齐
  • 史上最快AI计算机发布!谷歌TPU V3的1/5功耗、1/30体积,首台实体机已交付

    这个名为Cerebras Wafer Scale Engine(WSE)的“巨无霸”面积达到42225 平方毫米,拥有1.2 万亿个晶体管,400000 个核心...

    大数据文摘
  • TensorFlow成员说:深度学习的未来,在单片机的身上

    Pete Warden,是谷歌TensorFlow团队成员,也是TensorFLow Mobile的负责人,常年遨游在深度学习的大海。

    IT派
  • TensorFlow团队成员说:深度学习的未来,在单片机的身上

    Pete Warden,是谷歌TensorFlow团队成员,也是TensorFLow Mobile的负责人,常年遨游在深度学习的大海。

    量子位
  • ⭐Mapbox GL JS学习探索系列(2) - Source

    版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。 ...

    j_bleach
  • 基于Spark的大数据热图可视化方法

    针对普通客户端浏览和分析大数据困难的问题, 结合 Spark 和 LOD 技术, 以热图为例提出一种面向大数据可视化技术框架. 首先利用 Spark 平台分层并...

    ZONGLYN
  • 开源NewSQL – CockroachDB在百度内部的应用与实践

    IT大咖说
  • 深度揭秘谷歌TPU2机器学习集群:新一代的「谷歌云TensorFlow处理单元」

    选自The Next Platform 作者:Paul Teich 机器之心编译 参与:Nurhachu Null、黄小天 在最近的 2017 Google ...

    机器之心
  • 能效比提升超两倍,全球最高效ADC芯片问世

    在ADC芯片40多年的历史中,其基本架构、设计和生产技术已经趋近于成熟,但在庞大的消费电子领域中,如此复杂而成熟的芯片有时也会成为机器性能的瓶颈。虽然在芯片领域...

    机器之心
  • 史上最全分布式数据库概述

    墨墨导读:在集中式数据库系统不能完全符合实际需要的形势下,集中式DB的“集中计算”概念向“分布计算”概念发展。分布计算主要体现在客户机/服务器模式的分布式数据库...

    数据和云
  • 通信入门科普:dB的故事

    关于dB,最直接的解释就是:两个功率的比值取对数之后再乘以10,下面公式中的Log就表示取对数的意思。然而这样解释既拗口又难以理解。

    鲜枣课堂
  • NXP发布了一个带有RISC-V内核的芯片

    恩智浦日前预告了其带有NPU的“ i.MX9”平台,并发布了低功耗,基于Cortex-A35的i.MX8ULP和启用了Azure Sphere的i.MX8ULP...

    刘盼
  • 奖学金评分系统(系统分析与设计版与Delphi实现代码)

    在奖学金评比过程中,学生综合测评是学校普遍采用的评比手段。对学生实施综合素质测评的目的在于正确评价学生的综合素质,为评奖学金提供依据,实现学生教育管理工作的标准...

    用户1621453
  • 你写的代码要被 GitHub 存在北极啦!期限是 1000 年!

    GitHub 宣布,为了把开源软件留给子孙后代,将在 2020 年 2 月 2 日为所有公共存储库生成快照,保存在北极一个地下 250 米的废弃煤矿,快照储存在...

    GitHubDaily
  • 为什么我们要用BS架构来开发流媒体平台?

    熟悉我们的小伙伴都知道,我们开发的所有流媒体平台EasyNVR、EasyGBS、EasyCVR、EasyDSS等都是BS架构,至于BS架构和CS架构的区别,我们...

    TSINGSEE青犀视频
  • geotrellis使用(三十四)矢量瓦片技术研究——矢栅一体化

    前言 本文所涉及技术与Geotrellis并无太大关系,仅是矢量瓦片前端渲染和加载技术,但是其实我这是在为Geotrellis的矢量瓦片做铺垫。很多人可能会说,...

    魏守峰
  • 雷军1994年写的诗一样的代码,我把它运行起来了!

    这是一段古董代码了,因为在1994年,当时我的一个老师也是做汇编项目,他跟我聊过的故事是,当时是他跟一个前辈一起去现场给客户看故障,调试,用的ARM汇编,当时前...

    纯洁的微笑

扫码关注云+社区

领取腾讯云代金券