首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
您找到你想要的搜索结果了吗?
是的
没有找到

rtp载荷类型_架体荷载

大家好,又见面了,我是你们的朋友全栈君。 1简介 在Internet上用分组传送话音的质量不够好的一个重要原因是比较高的丢包率。尤其在 广域网中,这个问题相当突出。不幸的是,实时多媒体业务对于延时的要求相当严格,因此 不大可能通过重传来解决丢包的问题。 正是出于这个原因,大家提出用前向纠错(FEC)来解决Internet上的丢包问题[1][2]。 尤其是对于传统纠错码如校验码、RS码、汉明码等的使用引起了很多人的注意。为了能够更 好地应用这些纠错码,必须有相关的 协议来支持。 本文档定义了一种RTP的荷载格式,允许对于实时媒体流进行一般性的前向纠错。在这 里“一般性”指的是(1)与被保护的媒体类型无关,即音频、视频或其它;(2)足够灵活, 能够支持多种FEC机制;(3)自适应性,可以方便的修改FEC方案而不需要带外的信令支持; (4)支持若干种不同的FEC包的传输机制。 2术语 本文档中使用了下面这些术语: 媒体荷载:一段待传输的未加保护的用户数据。媒体荷载放在一个RTP包的内部。 媒体头:包含媒体荷载的包的RTP头 媒体包:媒体荷载与媒体头合起来称作媒体包 FEC包:发送端将媒体包作为前向纠错算法的输入,输出除了这些媒体包之外,还有一些 新的数据包称作FEC包。FEC包的格式在本文档中进行说明。 FEC头:FEC包的头信息称作FEC头。 FEC荷载:FEC荷载是FEC包中的荷载。 关联的:一个FEC包称作与一个或几个媒体包是关联的,如果在这个FEC包的产生过程 中这几个媒体包用作EC算法的输入 关键词“必须”,“必须不”,“要求的”,“会“,”不会“,“应该”,“不应该”, “建议的”,“或许”,“可选的”在 RFC2119[4]中解释。 3基本操作 这里描述的荷载格式用于一个RTP会话中的某一端想要用FEC来保护它所传送的媒体数 据流的情况。这种格式所支持的FEC是基于简单异或校验的纠错算法。发送端从媒体数据流 中取出若干个包,并对它们整个施以异或操作,包括RTP头。基于这样一个过程,可以得到 一个包含FEC信息的RTP包。这个包可以被接收端用来恢复任何一个用来产生它的包。本文 档中并未规定多少个媒体包合起来产生一个FEC包。不同参数的选取会导致在overhead,延 时和恢复能力之间的一个不同的折中方案。第4节给出了一些可能的组合。 发送端需要告诉接收端哪些媒体包被用来产生了一个FEC包,这些信息都包含在荷载信 息中。每个FEC包中包含一个24比特的mask,如果mask的第i个比特为1,序号为N+i 的媒体包就参与了这个FEC包的生成。N称作基序号,也在FEC包中传送。通过这样一种方 案就可以以相当小的overhead来用任意的FEC纠错方案恢复丢失的数据包。 本文档也描述了如何使接收端在不了解具体纠错码细节的情况下利用FEC的方法。这就 给了发送端更大的灵活性,它可以根据网络状态而自适应选择纠错码,而接收端仍能够正确 解码并用于恢复丢失的包。 发送端生成FEC包之后,就把它们发给接收端,同时,发送端也照常发送原来的媒体数 据包,就好像没有FEC一样。这样对于没有FEC解码能力的接收端,媒体流也照常可以接收 并解码。然而,对于某些纠错码来说,原始的媒体数据包是不需要传输的,仅靠FEC包就足 以恢复丢失的包了。这类码就具有一个很大的缺点,就是要求所有的接收者都具有FEC解码 能力。这类码在本文档中也是支持的。 FEC包并不与媒体包在同一个RTP流中传输,而是在一个独立的流中传输,或者作为冗 余编码(redundantencoding)中的次编码(secondaryencoding)来传输[5]。当在另一个 流中传输时,FEC包有它们自己的序号空间。FEC包的时间戳是从对应的媒体包中得来的,同 样是单调递增。因此,这样的FEC包可以很好地应用于任何具有固定差值的包头压缩方案。 本文并没有规定何为“一个独立的流”,而把它留给上层 协议和具体应用去定义。对于 多播的情况,“一个独立的流”可以通过不同的多播组来实现,或者同一个组的不同端口, 或者同样的组和端口中不同的SSRC。对于单播的情况,可以使用不同的端口或者不同的SSRC。 这些方法都各有其优缺点,选用哪一种取决于具体的应用。 接收端收到FEC包和媒体包之后,先判断是否有媒体包丢失。如果没有,FEC包就直接 被丢弃。如果有丢包,就使用接收到的FEC包和媒体包来进行丢包的重建。这样一个重建过 程是很精确的,荷载以及包头的大部分数据都可以完全恢复出来。 按照本 协议来进行打包的RTP包可以使用一个动态RTP荷载类型号来通知接收端。 4监督码 我们定义f(x,y,..)为数据包x,y,…等的异或,这个函数的输出也是一个数据包,称作 监督包。为简单起见,我们

02

[强基固本-视频压缩] 第六~七章: 上下文自适应二进制算术编码

让我们回顾一下使用 H.265/HEVC 系统编码视频帧的主要步骤(图1)。第一步,通常称为“块分割”,将帧分割成称为 CUs (编码单元)的块。第二步涉及使用空间(帧内)或时间(帧间)预测来预测每个块内的图像。当执行时间预测时,CU 块可以被分割成称为 PUs (预测单元)的子块,每个子块都有自己的运动向量。然后,预测的样本值从正在编码的图像的样本值中减去。结果,每个 CU 形成一个二维(2D)差异信号,或称为残差信号。第三步,2D 残差信号样本的数组被分割成所谓的 TUs (变换单元),每个 TU 都会经历离散的 2D 余弦傅里叶变换(对于包含帧内预测强度样本的 4×4 大小的 TUs 除外,这些 TUs 使用离散正弦傅里叶变换)。

01
领券