摘要:
2018年6月12号至6月15号,第9届ACM多媒体系统会议(MMSys,ACM Multimedia Systems Conference)在荷兰阿姆斯特丹召开。在这次报告中来自UIUC的Klara Nahrstedt教授对3DTI Video及分发系统,以及360度视频内容及分发系统进行了详细的介绍,主要讨论这两类视频分发技术的相同点、异同点以及新的挑战。
3DTI Video与360度视频系统异同点
相同点
均使用多摄像头视图,用户都只观看当前视图的内容,用户都可以切换所观看视角,都可以使用鼠标拖动的方式切换视角。两种视频系统对带宽的节省处理方式均为视角自适应方法,对于客户端都有自适应策略,流媒体协议均基于TCP协议,都考虑了传输比特率限制问题,都使用了特定的坐标系来简化视角播放问题。
不同点
在视频格式上,3DTI Video使用Color-Plus-Depth格式,360度视频使用Color格式;
在观看方式上,3DTI Video 使用平面2D或3D显示播放,360度视频使用头戴显示设备;
在最小适应单位上,3DTI Video粒度为3DTI frame,360度视频粒度为tile;
编码方式不同,3DTI Video使用Simple zlip,360度视频使用Complex HEVC编码格式;
分辨率不同,3DTI Video为640x480或1080p,360度视频为4k至16k分辨率;
对于不同设备,3DTI Video的分辨率相同,而360度视频分辨率与设备相关;
在切换视角时,3DTI Video只能使用鼠标拖动切换方式,而360度视频除此之外还可使用头部转动或手部移动的方式切换视角;
在流媒体协议上,360度视频遵守MPEG-DASH协议格式;
视频传输分发格式上,3DTI Video使用实时视图远程传送方式,360度视频使用DASH协议的格式传输。
总结与展望
本次报告具体比较了3DTI视频与360视频技术的异同点,而随着360度视频的飞速发展,对于视频的获取、编码与视角已经形成一些解决方案,但是在分发环节还面临实时性的挑战。
报告PPT全文