首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

基于权重图模型的VR视频比特分配方案

因此我们要解决的首要问题就是对VR视频进行压缩,有效的视频压缩编码技术是视频广泛、高效应用的保证。目前最常用的视频编码标准是HEVC标准,它有着压缩性能好,码率稳定等特点。 ?...图1 VR流程示意图 VR视频编码优化方法 基于VR视频的编码优化途径主要有三种。...其一是研究VR视频的曲面映射方案,因为VR视频是360度的球面视频,而HEVC编码软件是用于平面视频编码的,所以找到一个合适的球面到平面的映射方案使得编码质量有效的提高是个值得研究的课题。...比如在目前的广泛应用的高性能视频编码标准(HEVC)中,其中目标的码率控制理论主要是围绕着R和λ之间的关系确立,在目标比特分配步骤中,每个CTU的权重是通过MAD来计算的,而MAD是原始图像与预测图像的误差...这个CTU级比特方案权衡了基于图像复杂度的比特分配和权重图模型的比特分配,既考虑到VR视频的失真权重,又考虑到了视频本身的纹理程度。 下表是提出的方法相对于HEVC原始方法的BD-RATE。

1.4K40
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    从HEVC到VVC:帧内预测技术的演进(1) —方向预测(Angular intra prediction)

    本文分别以国际视频编码标准HEVC(High-Efficiency Video Coding)和正在制定过程中的VVC(Versatile Video Coding)标准为例,阐述了方向预测技术在这两代国际视频压缩标准之间的技术演进...一、HEVC中的帧内预测技术 HEVC标准制定的一个重要应用场景是高分辨率视频的编码,例如1080P和4K视频。...已有的研究成果表明,在传统基于块的混合编码框架下,采用更大块的预测和变换对高分辨图像和视频的压缩性能有非常显著的提高。因此,在HEVC编码标准中,预测单元的大小可以从4x4到64x64。...当映射后的像素的位置的坐标出现负数,左侧的参考列会映射到上侧参考列的左侧来对其进行扩展或者上侧的参考行会映射到左侧参考列的上方来对其进行扩展。...最终该技术在今年3月份的日内瓦会议被VVC所采纳 [8]。

    3.2K34

    【前沿动态】视频编码步入更压缩高性能时代

    目前,针对海量多媒体数据的压缩和处理,特别是VR和HDR视频数据,开发并提出新的高性能codec及处理方案是多媒体通信应用行业共同面临的难题。...因此,针对大规模数据进行压缩处理的研究和开发工作已经迫在眉睫,其中比较重要的一项就是制定HEVC/H.265的下一代视频压缩标准。...这使得它比诸如AVC和HEVC等压缩标准具有低得多的比特率性能,但是反过来却提供了非常低的延迟,即可以将延迟保持在一个视频帧以内。...根据ISO的标准化时间表,JPEG XS很可能会在2018年底之前获得批准,并会很快使用在相机上。 全景VR 此外MPEG还致力于制定沉浸式多媒体标准,例如360度视频和VR。...OMAF实现了许多技术优化,基本上对编码、流媒体传输、解码和呈现等环节都有影响,但在广泛采用之前可能还需要一些时间。其第一版主要关注基于HEVC的360度视频压缩。

    1.1K10

    助力Vision Pro等3D应用,腾讯V265新增对MV-HEVC标准的编码支持

    图4 红蓝3D图像 4)VR头显。VR头显将左右视点画面分别给到观众左右眼来呈现3D效果。...Meta Oculus就是一款市面上广受欢迎的VR头显设备,很显然,Apple最近重磅推出的Vision pro也是同样的VR产品。...图5 Apple Vision Pro 当下3D视频编码的主要方式 目前常用3D视频内容,主要是VR头显和立体影视,大都基于左右视点图像的编码、传输和显示来完成。...腾讯V265对MV-HEVC的支持进展 早在Vision Pro发布之前,腾讯云香农实验室就开始了对3D视频编码标准商用化的支持的调研和实现。...图11 V265支持MV-HEVC后的3D编码性能提升 总结 通过添加MV-HEVC编码相关的语法和模式支持,V265新增了3D视频编码能力,同画质下可减少20%的带宽 ,结合MV-HEVC标准易于硬解支持的生态优势

    1.6K20

    助力苹果 Vision Pro等3D应用,鹅厂竟推出了这个软件?

    观看这种视频只需要佩戴特殊眼镜即可。 图4 红蓝 3D 图像 1.4 VR 头显 VR 头显将左右视点画面分别给到观众左右眼来呈现 3D 效果。...Meta Oculus 就是一款市面上广受欢迎的 VR 头显设备,很显然,Apple 最近重磅推出的 Vision pro 也是同样的 VR 产品。...图5 Apple Vision Pro 02、当下 3D 视频编码的主要方式 目前常用 3D 视频内容,主要是 VR 头显和立体影视,大都基于左右视点图像的编码、传输和显示来完成。...05、V265 对 MV-HEVC 的支持进展 早在 Vision Pro 发布之前,香农实验室就开始了对 3D 视频编码标准商用化的支持的调研和实现。...图11 V265 支持MV-HEVC后的3D编码性能提升 06、总结 通过添加 MV-HEVC 编码相关的语法和模式支持,V265 新增了 3D 视频编码能力,同画质下可减少20%的带宽 ,结合 MV-HEVC

    60520

    AV1的五种编码进展

    随着高分辨率内容的不断增加以及VR和360°视频等技术的不断增加。对于大规模内容提供商能够满足他们技术先进的开放式编解码器的需求日益明显。...胶片颗粒合成 胶片颗粒通常发生在照相胶片中,最显着的是在过度放大的照片中,但也可以数字化地应用于艺术效果。...AV1几乎所有的大牌公司都已准备好让它成为一个视频世界的标准,它依赖于大分辨率的VR和AR视频应用程序。 现在,我们来仔细看看使AV1成为视频流中有趣选择的五种关键编码和解码技术。...更大的单位意味着每个帧的块数更细小,这是一种对大分辨率视频编码有利的因素,因为它允许更高级的压缩,同时保持较高的感知质量。这样做是为了减少大分辨率的编码延迟,以及降低每个块的信号传输码率。...用户对高质量视频流的需求已经不仅仅是有形这么简单,下一代高分辨率的移动设备和支持VR的终端将会进入全球市场。看到新技术的出现并为我们的日常生活铺平道路,这是一个令人神往的过程。

    81720

    会声会影2023有哪些全新功能?对系统要求介绍

    会声会影是一款专业的视频处理和制作软件,也是目前影楼制作结婚和一般视频特效制作的必备软件,他是一款专为个人及家庭所设计的数码影片编辑软件,可将数 字或模拟摄像机所拍下来的如成长写真、国外旅游、个人MTV...会声会影2023版相较于会声会影2022版本,新增了强大的滤镜和全新的覆叠功能、汇集了行业领先优秀特效、个性AR贴纸、MultiCam 录制和编辑、自由转换与共享影片等等功能。...可以用于剪辑合并视频,制作视频,屏幕录制,光盘制作,视频后期编辑、添加特效、字幕和配音等操作,无需专业的视频编辑知识,任何人都能快速上手。...蓝光光盘 网:YouTube,Vimeo 声音的:M4A、OGG、瓦夫、WMA 图像:BMP,JPG 导入格式 录像:AV13,AVCHD (.M2T/。...MTS),AVI、DV、DVR-MS、GIF89a、HDV、M2TS,M4V,MKV,现代的,MOV2(H.264/HEVC一),MPEG-1/-2/-4(H.264/HEVC一),MXF、托德、UIS

    90320

    欧洲杯直播卷向AI、XR等新赛道,腾讯云音视频助力平台把握观赛体验升级新风向

    另外,腾讯云音视频还升级了3D视频编解码能力,完成了对MV-HEVC拓展的支持,让用户享受到低成本的沉浸式空间视频新体验。...早在Vision Pro发布之前,腾讯云音视频便已开始关注3D视频编码标准的进展与实现,并第一时间添加了对MV-HEVC拓展的支持。MV-HEVC编码标准可显著提升3D视频主客观体验。...MV-HEVC的播放器可以同时解析和解码Base Layer和Secondary Stereo Layer数据,以3D的方式显示。...XR实时云渲染解决方案提供轻量的JavaScript、Android和iOS SDK,支持AR/VR眼镜、手机/Pad、PC、VR头盔等多终端,最快一天即可完成方案接入并使用。...发送端针对每条建立好的连接,根据实时的传输QoS进行状态的判断和决策,选择最佳路由进行数据的发送。进而解决弱网下单一网络带宽不足或抖动的问题。

    33310

    Xilinx FPGA,“加速”视频质量提升

    例如GPU或ASIC可以实现编码相关工作,而对于赛灵思FPGA,我们可以在芯片中加入HEVC和ABRScaler的IP,从而实现多种不同码率视频流的生成。除此之外,还有低延迟等更多特性。 2....数据进入芯片,通过CPU完成解码,进行音频和视频的解码调试,将解码出的视频发送至ABR的IP,再将结果传递给VP9编码器,最终与音频进行调制,生成VP9编码的音视频媒体流。...2.2 HEVC+VP9编码视频流生成 在上述方案的基础上,只需要加载HEVC的IP,即可在同一芯片中实现VP9编码视频流以及生成HEVC编码视频流。...2.4 同一芯片中可接入多个IP 上述内容中所提到的ABR的IP,H.264的IP,在同一芯片中可以接入多个,并通过CPU进程进行调度。 编码器多路视频流输入、输出的应用 3....赛灵思实时视频转码架构 如上架构图所示,赛灵思实时视频转码包含两种不同的途径,XMA和OpenCL。按照层次结构,向下划分为HAL硬件抽象层,驱动以及最底层的数据通道和管理通道。

    1.7K20

    LiveVideoStackCon 2017 音视频技术大趴就要开始了

    上周末,我们组织LiveVideoStackCon 2017大会讲师培训,从以往的经验看,讲师培训能给技术人更清晰的演讲思路、避免常见错误,提升演讲质量和自信的方法。这是一些列提升演讲质量的措施之一。...暴风影音全景VR体育比赛转播的HEVC编码技术 4K高清和VR的兴起颠覆了体育转播的观看体验。...暴风影音首席架构师鲍金龙将会介绍全景VR直播下的HEVC编码优化,包括去除左右图像之间的空间冗余,图像进行分层编码,超过16核的并行编码效率,4K图像编码速度优化等。...秒拍、小咖秀、晃咖等框架设计和关键技术实践 一下科技视音频技术负责人解晶将介绍服务于秒拍、小咖秀、晃咖、视频大师等不同产品需求的短视频编辑框架的设计和演化流程,并对其中一些关键技术进行分析,包括硬件编解码在短视频中的应用实践...网宿VR视频窄带高清技术探索 网宿科技资深音视频专家孙磊将分享整理了当前低带宽下VR传输的主要技术点,包括球面到立方体投影方式转换、根据视角按需传输、H.265以及P2P,网宿科技基于上述各项技术已可在

    73930

    LiveVideoStackCon 2017 打造最专业的音视频技术大会

    你也许没有听说过WebRTC、HEVC、HLS,但你肯定知道FaceTime、YouTube、微信,这些流行的应用离不开许多多媒体技术的支撑。我们的世界已经被网络、移动设备和各种多媒体应用连接着。...主要从事视频和图像算法的优化和实现,经历过MPEG2、H.263、MPEG4、H.264、H.265/HEVC等标准的实现。...七牛播放器研发总监金邦飞:如何设计一个简单高效的播放器 hulu全球高级研发经理傅德良:流媒体服务质量和用户体验优化 网宿科技资深音视频专家孙磊:VR视频窄带高清技术 YY直播部媒体技术中心研发经理冯迅...一下科技视音频技术负责人解晶:秒拍、小咖秀、晃咖、视频大师等短视频框架设计和关键性技术实践 暴风影音首席架构师鲍金龙:全景VR体育比赛转播的HEVC编码技术 毛豆网研发总监李尊龙:毛豆网音视频直播云平台的技术栈架构和实现...腾讯 2017 IMWebConf大会门票免费送 点击下方礼包,打开新文章链接 在新链接评论区留下足迹,回答的点赞数越高,惊喜越多哦!

    96120

    基于Open WebRTC Toolkit(OWT)的8K全景视频低延时直播系统

    对于视频行业而言,以下几个方向值得关注:首先是360全景视频,也是本次讨论的主题;其次Cloud Gaming(云游戏),是目前高速发展的领域;VR和AR技术;最后,Smart City(智慧城市):包括无人驾驶技术...如果对全景图像进行8K的网络传输和视频解码,会造成了极大的网络资源和计算资源的浪费。并且目前主流的VR设备还不具备8K视频解码能力,甚至4K也只是一些高端设备才能支持。...VR设备的视角通常在80~120度。以90度视角为例,用户在特定时刻可见的画面只占据全景图像的1/8左右。...原始分辨率和低分辨率的两路HEVC Tile视频流,通过Bitstream Rewriter合成一路HEVC兼容Mix Resolution流。...为了增加对360全景视频的支持,扩展了原生WebRTC Stack并加入了HEVC Codec和HEVC Tile的支持,以及HEVC RTP的Packetizer和De-packetizer;第二,Media

    4.7K128

    关于高级视频压缩和应用的讨论

    -4、AVC、HEVC、VVC、VP8、VP9、AV1、EVC 和 LCEVC。...在这个小组中,我们将探讨这些技术所带来的消费者服务的广度,包括高分辨率 4K、8K,以及 HDR 和 AR/VR: 这些最终是否会起飞并实现其承诺?...4K HDR 的 HEVC 将成为广播/流媒体的新规范吗? 8K 是否是电视、甚至电脑、平板电脑和智能手机等消费设备的终点? 视频编码还能走多远?...由于 COVID 的情况,这里有很多应用,例如,我们看到视频会议越来越受欢迎,也有云游戏,这是一个增长很多的东西,并且在市场方面可能比 AR 和 VR 更有前景,这是我个人的看法。...我想到我们今天谈论的所有应用,无论是 AR、 VR,甚至是低比特率视频会议,我认为机器视频编码如果不是最大的趋势,可能是一个巨大的趋势。

    70330

    从HEVC到VVC:变换技术的演进(2)—— 二次变换(Secondary transform)

    本文以HEVC(High-Efficiency Video Coding)和正在制定过程中的下一代VVC(Versatile Video Coding)标准为背景,阐述了二次变换技术在这两代国际视频压缩标准之间将近十年时间里的技术演进...ROT本质上是一种可分离的二次变换,如下图所示,ROT在主变换DCT和量化之间对变换系数进行二次变换。 ? ROT所用的变换核是一种旋转矩阵,如下所示分别为ROT采用的列变换和行变换的变换核, ?...二、 HEVC后的二次变换技术演进 HEVC制定工作完成之后,各个公司开展了下一代视频编码技术的研究工作,其中一个里程碑式的贡献是由提案COM16-C806提出的基于HEVC的编解码技术改进方案 [3]...三、VVC中的二次变换技术 经过多轮改进和简化, NSST技术于最近一次在日内瓦举办的JVET会议被采纳。...新一代VVC标准于最近一次二零一九年三月日内瓦会议采纳了基于归零的不可分离二次变换技术方案,该技术实现了继多候选变换技术的又一次技术跨越,提供了视频编码整体性能的显著提高。

    2.8K31

    1.21 VR扫描: 娱乐再定义, VR游乐园或成新方向

    Two Bit Circus打算将融资投入到VR游乐园的建造中去,游乐园中将包含VR和MR体验、社交游戏、火焰和激光特效的游戏、机器人等。...华为、联通参与,VR质量评价提案在日内瓦立项通过 前日,在日内瓦召开的ITU-T SG12全体会议上,华为在会议上提出QoE for VR(Quality of Experience for Virtual...作为一种新的媒体,VR包含视频、音频、交互、反馈以及其他感官的多感知性特点,需要有与之相匹配的全新质量评价方法。该提案受到了与会多家公司的支持,中国联通参与。...该工具包会作为开源Python脚本库和Unity软件开发工具包提供,其中包括支持一系列的媒介的asset。 VRPinea独家点评:视觉艺术与VR相结合,激发艺术家无限创作潜能。...近日,IMAX在离自家总部数英里的 Grove 购物中心搭建了超高端的 VR 游乐场。 IMAX 在休息室里设置了两个体验区,在这里你可以试玩许多与电影有关的游戏,如《星球大战》等。

    76750

    小明带你看WWDC 2017(day2实况)

    HEVC&HEIF Core ML、ARKit之后,第三个令人兴奋的内容就是苹果推出新的视频编码算法和图片编码格式: HEVC(High Efficiency Video Coding)、HEIF(High...下图是HEVC编码的改进之处: ? 目前HEVC兼容的视频格式是MOV和MP4,这是MOV文件使用HEVC编码的大体文件格式展示: ?...HEIF是一个文件格式,其内部编码推荐使用HEVC(是不是想到了音视频的SharpPJ ),当然也支持其他的编码算法。 ? 文件扩展名规范如下: ? 大体文件格式预览如下: ?...其实只有一个方案,即对于不支持HEVC/HEIF的外部系统都得转码… HEVC/和HEIF有如此好的性能(压缩率),但却是苹果定制,未来到底怎么利用它呢,大家开动大脑吧。...另外再纠正一个昨天文章的错误,Drag&Drop的能力iPad/iPhone都可以使用,交互同学可以尝试使用下这种交互了。还有,不是steam VR SDK是stream VR SDK :)。

    749100

    沉浸式媒体

    简单的说,在OMAF的第一版里,支持三自由度,还是简单地延用以前的HEVC,那么是不是用H.265和Dash一搭就成了?...这部分的视频编码标准可以理解为就是HEVC(H.265)的下一代。但是它也是在Immersive Media框架之下,所以是MPEG I的Part3,就像HEVC实际上是MPEG H的一部分。...从2013年上一代HEVC视频编码的标准制订结束之后,FVC就已经启动了相应的研究。...FVC 相对于HEVC的性能提升 视频编码仍然是非常受重视的,其中传统的2D视频编码效率的提升,即针对HEVC(H.265)的提升还是非常有价值。...其实下一代的视频编码一个很重要的趋势是不仅仅只针对娱乐视频,电影电视或者UGC的内容,VR是一个需求,还有很多像监控和行业视频方面的需求驱动未来视频编码技术的研究。

    1.4K30

    VVC怎么了?

    我们需要知道的是,VVC此类视频压缩标准将拥有与新功能相关的独特专利,但也会包含源自以前标准(如HEVC和H.264)的专利。...正如新闻[10]中所提到的,获得VVC和HEVC许可并签署MCBA的公司,其同时使用VVC和HEVC专利的产品将享受45%的专利折扣,与仅使用VVC的产品花费的专利费相同。...为了完整起见,我应该指出,VVC还为VR和AR应用(未来几年这些应用将融合在一起)带来了独特的增强功能。...也就是说,可能需要 2~3年,具有VVC播放功能的电视机安装数量不断增加,这样才能吸引独立发行商。 VVC 似乎在VR和AR方面处于早期技术领先地位。...另一方面,如果AR/VR真的广泛流行起来,并且对VVC的支持成为了“入场券”,那我们将有可能看到VVC的大规模采用和部署。

    1.2K20

    探索亚马逊Yawanawá部落,以VR纪录其第一位女性萨满

    最终,一部名为《Awavena(阿瓦维娜)》的VR电影横空问世。这部作品讲述了Hushahu萨满的转变,以及其革命性的被任命为萨满之后所带来的积极影响。...为更好的拍摄《Awavena》,Lynette与搭档兼制片人 NicoleNewnham 共同前往亚马逊部落会见了Tata,同时还与 Hushahu 探讨了其在影片中担当的重要角色。...两个月后,Lynette和团队离开了Yawanawá。在Lynette看来,由于Tata的决定,这里的部落已经完全恢复了活力。...是以,我们运送了3只满载科技的独木舟,上面有着多台摄像机和扫描仪。所有这些都是为了向大家展示在Yawanawa所发生的事。”...虽然目前还没有更多关于《Awavena》的消息,不过LynetteWallworths的第一部作品《Collisions》现已可在各大主流VR视频平台进行观看。 ?

    80320
    领券