专栏首页腾讯多媒体实验室干货来袭丨音视频质量评估绿皮书

干货来袭丨音视频质量评估绿皮书

本文共计丨1564字

预计阅读时间丨4分钟

网络技术的升级使得市场上音视频类的产品形态越来越多,直播、短视频你方唱罢我登场。公司内也有多个专注于音视频技术、音视频产品服务的团队。音视频产品需要关注哪些质量控制点,如何评估音视频质量,笔者就在音视频实验室的几年工作经验进行介绍。欢迎相关团队同学互相探讨,共同成长。

一、不同场景下关注评估重点不同

音视频产品的评估涵盖多个维度,不同场景下的维度取舍存在较大的差别。目前市场上主流的音视频产品可以按应用场景分为如下几类(还有些小众产品,如会议类、投屏类没有列入在内)

特别说明,上述的划分也不是绝对的,有些会有交集,如直播里很多产品都有互动直播的能力,这一部分会与实时通话的场景相近。

对于这几类场景,从质量角度,虽然很多指标是通用的,但侧重点会有所不同。实时场景关注E2E传输质量(如时延)和信息可懂性,直播场景更关注主播上行网络抗性能力和观众体验(卡顿、音画是否同步),短视频会更多关注画质与用户体验,而长视频则会更关注转码质量及效率。这些的背后与产品的定位及所采用的技术密切相关。

二、音视频产品的质量关注点

通常音视频数据的加工流程可以概括为下图:

每个环节都有可能引入质量的损失,导致最终信息接收者观看到的内容变差(上面这种是流水线式处理,长短视频场景下数据生产和消费的环节是分开的,而且其中会有离线转码处理的环节,如多分辨率,HDR等)。

我们可以针对每个环节进行测试,但产品质量更多的是这些环节的综合过程,所以从观众的角度来进行考虑效率会更高一些。以下罗列一些我们重点关注的质量维度:

按照现在比较流行的划分方法,这里按照用户是否可直接感知分为QoE(Quality of Experience)与Qos(Quality of Service)两个大的维度。

对于长视频产品,由于视频源一般为专业设备所拍摄,所以原始质量相对是非常高的,用户的槽点会集中在视频是否流畅,画质是否有瑕疵(花屏、马赛克),画质是否稳定(想像看视频时480p和1080p来回反复切换的状态);与长视频相比,由于视频内容多为用户普通终端拍摄,原始视频质量就会参差不齐了,需要借助算法提升质量,所以除了长视频的关注点外还需要关注清晰度等画质细节指标(特别说明一个常见的误区,清晰度不能等同于分辨率,高分辨率图像的清晰度未必比低分辨率高);互动直播和实时通话这种对时延敏感的产品,传输技术上一般是采用UDP或基于UDP(如Quic)的协议来进行,就容易产生音轨与视频轨不一致的问题,音画同步在这类场景下也一个很重要的质量指标。除此之外,音频下的杂音、破音、丢字、回声也都会严重影响用户体验的,一般产品都会进行3A处理模块,那么处理效果怎么样,也需要进行验证评估。(补充说明一下,音视频的QoE实际是一个相对复杂的范畴,我们只能从一些客观技术指标上进行评判。不同人群对于内容的喜好也会对QoE产生较大影响,这就更偏重于心理学问题了。)

除了用户体验之外,由于音视频的流量消耗、存储消耗与高CPU消耗的特点也决定我们要对这些通用性能指标进行关注。

三、音视频质量评估方法

音视频质量的测试,以开发角度来说,可以采取LOG埋点、虚拟机的方式来收集数据。但站在用户的角度,在集成测试阶段并不推崇这种方式,因为音视频业务对硬件的依赖可能会导致软件理论结果与产品现网实际表现存在较大差异。E2E的验证更能有效说明产品质量。为了追求场景的无干扰性、模拟准确性、指标测量准确性,一致性。音视频实验室建立起一套相对完整的音视频测试能力体系。这些包括专业化实验室与商用设备。

也包括我们自研的一些方法,如《音画同步测试方法》,《视频卡顿测试方法》等。我这里对相关的指标的评估技术做一个简单的梳理:

———— / END / ————

本文分享自微信公众号 - 腾讯音视频实验室(TencentAVLab),作者:赵珺

原文出处及转载信息见文内详细说明,如有侵权,请联系 yunjia_community@tencent.com 删除。

原始发表时间:2019-04-08

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 腾讯北大AVS产业联盟三方合作 共同制定互联网图像与视频标准

    3月18日,国际音视频产业论坛暨AVS标准十五周年年会在北京举行,大会上腾讯公司、北京大学数字视频编解码技术国家工程实验室、AVS产业联盟三方宣布达成合作,共同...

    腾讯多媒体实验室
  • 腾讯音视频实验室:标准布局+技术创新,助力音视频体验深度优化

    腾讯科技讯 5月21日—23日,2019腾讯全球数字生态大会在昆明召开,来自腾讯音视频实验室的专家研究员商世东带来了题为《面向产业互联网的音视频技术发展展望》...

    腾讯多媒体实验室
  • 腾讯音视频实验室 | 让世界在你身边

    腾讯音视频实验室 Tencent AVLab 1我们是谁 腾讯音视频实验室专注于音视频技术的前瞻性研究。我们依托于QQ的海量平台,在音视频网络通信、音视频直播、...

    腾讯多媒体实验室
  • 腾讯北大AVS产业联盟三方合作 共同制定互联网图像与视频标准

    3月18日,国际音视频产业论坛暨AVS标准十五周年年会在北京举行,大会上腾讯公司、北京大学数字视频编解码技术国家工程实验室、AVS产业联盟三方宣布达成合作,共同...

    腾讯多媒体实验室
  • 腾讯实时音视频TRTC百万级用户并发解决方案

    今年我们经历了一个特殊时期,导致大家必须很长的时间段内在家中,大量的企业也选择让员工在家中远程办公、学校选择让老师和学生在通过远程教学的方式进行学习。

    shixin
  • 从腾讯云音视频通信,看全真互联网下的新机会——对话腾讯云副总裁李郁韬

    2006 2021 李郁韬腾讯云副总裁 2006年从电子科大毕业后,Tommy 就进入了腾讯。他从 QQ 后台应用做起,做了近十年的后台研发工作。2016年后...

    腾讯即时通信IM
  • 腾讯音视频实验室:标准布局+技术创新,助力音视频体验深度优化

    腾讯科技讯 5月21日—23日,2019腾讯全球数字生态大会在昆明召开,来自腾讯音视频实验室的专家研究员商世东带来了题为《面向产业互联网的音视频技术发展展望》...

    腾讯多媒体实验室
  • 关于音视频测试的一点建议

    villainhr
  • 音视频已强势崛起,我们该如何快速入门音视频技术?

    最近经常遇到一些同学问我如何学习音视频,怎样才能快速上手?还有一些对音视频不了解的同学问我该不该学习音视频?作为一名音视频行业的10年老兵,我有一些思考分享给大...

    音视频_李超
  • 即构音视频SDK:跨四平台、三种类型终端,让直播保持低延迟高画质

    说到音视频云服务,大多数人可能联想到的是网络直播应用场景,实际上,硬件对音视频云服务的需求也在逐渐提升。而这样的市场需求也推动了整个行业的发展,目前,阿里云、腾...

    BestSDK

扫码关注云+社区

领取腾讯云代金券