全真互联网下音视频技术创新应用

腾讯多媒体实验室

发布于 2021-10-09 11:10:08

8500

发布于 2021-10-09 11:10:08

文章被收录于专栏：腾讯多媒体实验室腾讯多媒体实验室

在过去的一年中，我们可以看到多媒体特别是音视频技术的能力在严峻的挑战下，为各行各业带来了巨大的变化。疫情过后，又会有哪些多媒体新技术、新实践呈现在大众的视野当中？为行业的发展与应用带来哪些新的趋势与机会？

10月29日-30日，LiveVideoStackCon 2021 音视频技术大会北京站，一同探讨音视频行业与技术发展的挑战和更多机会。

.全真互联网下音视频技术创新应用.

随着云计算的普及与高速发展，5G网络、VR技术的日益成熟，我们正向着全真互联网时代大步迈进。伴随着新时代的到来，“元宇宙”、“沉浸式”等概念横空出世，挑战与机遇同在，我们不得不思考，哪些行业、产品和商业模式将最早受到全真互联网的影响？腾讯云音视频基于在音视频领域21年的积累，构建了RT-ONE™“三合一”音视频通信基础网络，本次专场将为大家带来全新all in one终端引擎、跨平台能力、海外直播技术、云渲染技术、多媒体处理等技术的最新动向。

.出品人.

SPEAKER

of 2021

李郁韬

腾讯云

副总裁

资深互联网专家，现任腾讯云副总裁，2006年加入腾讯，曾任QQ通信与音视频技术负责人，具备深厚的行业洞察与技术积累。目前负责腾讯云音视频、5G通信、加速产品、云监控产品等相关业务及团队管理工作。

.讲师与议题.

SPEAKER

of 2021

常青

腾讯云专家工程师

腾讯云音视频终端研发总经理

2008年加入腾讯，在客户端技术研发领域有着深厚的积累，先后参与过 PC版QQ、手机QQ和智能硬件等项目，目前在腾讯云负责音视频相关产品的终端技术的研发和团队管理工作。

TOPIC：

.新一代音视频终端引擎框架设计和技术实现.

经过五年的努力，腾讯云终端团队不断完善并积累出了一套完整的终端SDK方案体系，包含即时通信，主播推流，直播播放、点播播放、RTC实时互动、短视频录制，特效编辑等一系列音视频和实时通信相关的功能特性。在这些功能背后，团队是如何完成了框架设计、组件打磨、数据流转、性能优化的呢？本次分享会从产品能力、架构设计、以及技术原理等多个角度进行剖析，期待您的关注。

SPEAKER

of 2021

牛赞

腾讯云高级工程师

腾讯云音视频Web前端核心开发

2015年加入腾讯，先后负责过王者荣耀、英雄联盟竞猜、QQ会员等业务，目前负责腾讯云实时音视频TRTC前端技术研发工作。

TOPIC：

.音视频前端跨平台技术应用.

随着跨平台技术的不断发展，从最早的跨平台技术Hybrid App，再到ReactNative、Weex等框架，上面两个阶段性能上都跟App端有或多或少的差距。为了解决性能瓶颈，Google开源的Flutter出现了，它自带渲染引擎，可直接编译成原生代码，性能优异。除了支持移动端、它还支持了桌面端和web端，目前star数已经远远超过了ReactNative，带给我们更多的想象空间。

Flutter是近两年大火的跨终端框架，实时音视频因为疫情的缘故也越来越融入到人们的日常工作生活中，如线上会议、在线教育等。两者结合起来可以碰撞起什么样的火花呢？利用Flutter实时音视频SDK，我们可以快速开发一个跨平台的会议、娱乐、教育等APP。本次分享主要讲述了利用Flutter如何进行实时音视频渲染，并深入底层，优化视频渲染的性能。

SPEAKER

of 2021

胡仁成

腾讯云高级工程师

腾讯云直播海外技术负责人

2017年加入腾讯云，负责海外直播产品以及媒体服务产品的研发和优化相关工作，致力于打造分布式、高可用、高质量的直播流媒体处理分发平台。

TOPIC：

.腾讯云海外音视频技术架构.

腾讯云海外直播系统建设起始于2016年，致力于打造全球先进的高质量流媒体处理和分发平台。在近5年的建设时间里，系统从单一中心化的架构发展为全球共11个直播中心的分布式架构系统，直播中心之间通过专线互连，边缘加速点覆盖全球共61个国家或地区，真正意义上具备了就近接入就近分发的能力。

海外直播平台不仅具备优质的物理资源，在软实力上也得到了很大提升。在传输层上，除了传统的TCP协议，同时还支持基于UDP的加速协议QUIC。在流媒体协议上，支持传统的RTMP、HTTP-FLV、HLS等协议，同时支持多码率自适应HLS和DASH，在此基础上，升级实现了低延时的CMAF协议。

近年来，基于WebRTC协议，海外直播系统实现了秒级延时的WebRTC低延时直播能力，在播放Qos优化上迈出了更大的一步。

SPEAKER

of 2021

王超

腾讯云专家工程师

云渲染技术负责人

2011 年加入腾讯，曾负责过 QQ 音视频后台开发，2015年开始参与腾讯视频云相关技术的研发，目前负责云游戏、云桌面、云渲染的技术研发工作。

TOPIC：

.云渲染技术框架及互动新玩法.

随着游戏及软件云端化运行能力的支持，大型游戏和软件可以在浏览器、轻客户端以及小程序中运行，在扩展了使用场景边界的同时，也为游戏和软件探索云原生实现提供了基础。腾讯云云渲染 PaaS 提供了基于 WebRTC 的万人级互动交互的云原生能力，包括操作权限转移管理、多人语音会话等，本次分享会介绍互动新玩法上的技术实现。

SPEAKER

of 2021

李松南

腾讯云专家研究员

多媒体实验室融合媒体总监

毕业于哈尔滨工业大学计算机科学与工程系，获得计算机科学与技术专业学士与硕士学位。2012 年在香港中文大学电子工程系获得博士学位。2014 年至 2016 年期间，在香港中文大学电子工程系担任研究助理教授。在图像处理与计算机视觉领域有 15 年的研发和产业化经历。研究方向包括图像降噪、人脸重建、三维跟踪、图像质量评估、视频编解码等。相关成果在 TPAMI、TMM、TCSVT、TIP、CVPR 等计算机视觉、图像处理领域顶级期刊和会议上发表。2019年加入腾讯以来担任腾讯多媒体实验室视频技术总监，带领团队研发了基于信号处理和深度学习的多媒体内容处理、分析、理解等多项技术与产品。

TOPIC：

.全真时代与智能时代的多媒体技术.

视觉体验在全真时代显得越发重要，如何提高用户的视觉体验？更好的编码标准带来的低码率高画质、超分等视频处理手段带来的画质提升、三维视频带来深度感知、任意视点视频或者VR360视频带来的用户交互、扩展现实与虚拟现实带来的超现实感；另一方面，智能时代革新了音视频技术，通过音视频分析更好的理解数据与链接用户、通过辅助创作让音视频内容极大丰富……让我们一起发掘在全真时代与智能时代里多媒体技术的无限可能。