《低时延的多视点分布式视频编码系统帧排列方式.pdf》由会员分享，可在线阅读，更多相关《低时延的多视点分布式视频编码系统帧排列方式.pdf（6页珍藏版）》请在专利查询网上搜索。
1、(10)申请公布号 CN 103997654 A (43)申请公布日 2014.08.20 CN 103997654 A (21)申请号 201410252473.0 (22)申请日 2014.06.09 H04N 19/597(2014.01) H04N 19/51(2014.01) H04N 19/59(2014.01) (71)申请人 天津大学 地址 300072 天津市南开区卫津路 92 号 (72)发明人 郭继昌 许颖 (74)专利代理机构 天津市北洋有限责任专利代 理事务所 12201 代理人 刘国威 (54) 发明名称 低时延的多视点分布式视频编码系统帧排列 方式 (57) 摘要。
2、 本发明属于分布式视频编码技术领域， 为实 现提高视频帧的重构质量， 降低解码时延， 本发明 采取的技术方案是， 低时延的多视点分布式视频 编码系统帧排列方式， 包括如下步骤 ： 首先， 在时 间方向上， 即同一个视点不同时刻的帧， 奇数视点 的前两帧都是关键帧即 K 帧， 从第三帧开始出现 非关键帧即 WZ 帧， 此后 K 帧、 WZ 帧交替出现 ； 偶 数视点的前两帧是 WZ 帧， 第三帧是 K 帧， 此后 K 帧、 WZ 帧交替出现 ； 奇数视点的前两帧外推出后 一帧， 然后把当前解码的 WZ 帧作为已解码帧与后 一 K 帧外推出后面的 WZ 帧 ； 第二， 在视点方向上， 即不同视点同。
3、一时刻的帧， 在同一时刻的不同视 点的帧的排列是K 帧与 WZ 帧交替出现的。 本发明 主要应用于视频编码。 (51)Int.Cl. 权利要求书 1 页 说明书 3 页 附图 1 页 (19)中华人民共和国国家知识产权局 (12)发明专利申请 权利要求书1页 说明书3页 附图1页 (10)申请公布号 CN 103997654 A CN 103997654 A 1/1 页 2 1. 一种低时延的多视点分布式视频编码系统帧排列方式， 其特征是， 包括如下步骤 ： 首先， 在时间方向上， 即同一个视点不同时刻的帧， 奇数视点的前两帧都是关键帧即 K 帧， 从第三帧开始出现非关键帧即WZ帧， 此后K帧。
4、、 WZ帧交替出现 ； 偶数视点的前两帧是WZ帧， 第三帧是 K 帧， 此后 K 帧、 WZ 帧交替出现 ； 奇数视点的前两帧外推出后一帧， 然后把当前解 码的 WZ 帧作为已解码帧与后一 K 帧外推出后面的 WZ 帧 ； 偶数视点的第二帧与第三帧外推 出第四帧 ； 第二， 在视点方向上， 即不同视点同一时刻的帧， 在同一时刻的不同视点的帧的 排列是 K 帧与 WZ 帧交替出现的 ； 每个视点的 WZ 帧的边信息是通过与之相邻的视点的同一 时刻的 K 帧通过视差矢量内插法获得的。 2. 如权利要求 1 所述的低时延的多视点分布式视频编码系统帧排列方式， 其特征是， 解码顺序如下 ： 对于视点之。
5、间的边信息解码， 是先解码 1 号视点的第一帧关键帧 K 帧， 同时 解码 3 号视点的第一帧关键帧 K 帧， 然后通过视差矢量内插法解码 2 号视点的第一帧非关 键帧 WZ 帧 ； 依次按照这样的顺序， 视点间解码， 先解码 K 帧， 再由已解码的关键帧通过视差 矢量内插法解码 WZ 帧 ； 在视点内部， 在 1 号视点内部， 先解码 1 号帧关键帧 K 帧， 再解码 2 号帧关键帧K帧， 然后由已解码的2个K帧， 经过运动补偿外推法获得2号帧非关键WZ帧的 边信息， 从而重构出2号帧。 然后将已解码的3号帧， 和解码的4号帧， 通过运动补偿外推法 外推出 5 号帧的时间边信息， 重构出 5。
6、 号帧 ； 在 2 号视点内部， 1 号帧和 2 号帧非关键帧 WZ 帧是通过视点间边信息得到解码的， 然后已解码的 2 号帧与 3 号帧关键帧 K 帧， 通过运动补 偿外推法获得 4 号帧的视点间边信息， 解码 4 号帧， 然后 4 号帧与 5 号帧外推解码 6 号帧， 以此类推其他的帧间解码， 帧间的解码， 是通过前两帧根据运动补偿外推法得到 WZ 帧的。 权 利 要 求 书 CN 103997654 A 2 1/3 页 3 低时延的多视点分布式视频编码系统帧排列方式 技术领域 0001 发明属于分布式视频编码技术领域， 尤其涉及一种低时延的多视点分布式视频编 码系统帧排列方式。 技术背景。
7、 0002 分布式视频编码是一种新兴的视频编码技术， 它能够使运动估计与运动补偿预测 从编码端转移到解码端， 有效地降低了编码端复杂度， 适用于低复杂度、 低功耗的视频系 统， 如无线监控系统、 无线视频系统等。 多视点分布式视频编码和传统的单视点视频编码相 比可以提供更多的视频场景信息。 0003 多视点分布式视频编码中， 边信息的获得是整个系统的关键部分， 直接影响解码 端非关键帧的重构质量。 不同的帧排列方式采用不同的时间边信息和视点间边信息生成方 式， 传统的多视点分布式视频编码系统中选择的大多都是棋盘型的帧排列方式， 但这种帧 排列方式的多视点视频编码系统中存在着大量的时间延迟， 不。
8、能够满足实时性要求高的视 频系统的要求。 0004 现有的多视点分布式视频编码的帧排列方式大多采用棋盘型， 即关键帧(K帧)和 非关键帧(WZ帧)间隔排布， 在这种排列方式中， 视点间边信息与时间边信息分别采用视差 矢量内插法和运动补偿内插法。这种排列方式在视点内部采用运动补偿内插法， 这导致视 点内部的解码顺序与显示顺序不一致， 从而导致了一定的解码时延， 加上本身的传输时延， 这种边信息解码方式存在较大时延。为了降低整个系统的解码时延， 急需一种新型的帧排 列方式。 发明内容 0005 为了克服现有技术的不足， 实现提高视频帧的重构质量， 降低解码时延， 能够适用 于对实时性要求高的视频系。
9、统。 为此， 本发明采取的技术方案是， 低时延的多视点分布式视 频编码系统帧排列方式， 包括如下步骤 ： 首先， 在时间方向上， 即同一个视点不同时刻的帧， 奇数视点的前两帧都是关键帧即 K 帧， 从第三帧开始出现非关键帧即 WZ 帧， 此后 K 帧、 WZ 帧交替出现 ； 偶数视点的前两帧是 WZ 帧， 第三帧是 K 帧， 此后 K 帧、 WZ 帧交替出现 ； 奇数视 点的前两帧外推出后一帧， 然后把当前解码的WZ帧作为已解码帧与后一K帧外推出后面的 WZ 帧 ； 偶数视点的第二帧与第三帧外推出第四帧 ； 第二， 在视点方向上， 即不同视点同一时 刻的帧， 在同一时刻的不同视点的帧的排列是K。
10、帧与WZ帧交替出现的 ； 每个视点的WZ帧的 边信息是通过与之相邻的视点的同一时刻的 K 帧通过视差矢量内插法获得的。 0006 解码顺序如下 ： 对于视点之间的边信息解码， 是先解码 1 号视点的第一帧关键帧 K 帧， 同时解码 3 号视点的第一帧关键帧 K 帧， 然后通过视差矢量内插法解码 2 号视点的第一 帧非关键帧 WZ 帧 ； 依次按照这样的顺序， 视点间解码， 先解码 K 帧， 再由已解码的关键帧通 过视差矢量内插法解码 WZ 帧 ； 在视点内部， 在 1 号视点内部， 先解码 1 号帧关键帧 K 帧， 再 解码 2 号帧关键帧 K 帧， 然后由已解码的 2 个 K 帧， 经过运动。
11、补偿外推法获得 2 号帧非关键 说 明 书 CN 103997654 A 3 2/3 页 4 WZ 帧的边信息， 从而重构出 2 号帧。然后将已解码的 3 号帧， 和解码的 4 号帧， 通过运动补 偿外推法外推出 5 号帧的时间边信息， 重构出 5 号帧 ； 在 2 号视点内部， 1 号帧和 2 号帧非 关键帧 WZ 帧是通过视点间边信息得到解码的， 然后已解码的 2 号帧与 3 号帧关键帧 K 帧， 通过运动补偿外推法获得 4 号帧的视点间边信息， 解码 4 号帧， 然后 4 号帧与 5 号帧外推解 码 6 号帧， 以此类推其他的帧间解码， 帧间的解码， 是通过前两帧根据运动补偿外推法得到 。
12、WZ 帧的。 0007 与已有技术相比， 本发明的技术特点与效果 ： 0008 比较之前的棋盘式排列的多视点分布式视频编码， 本发明所提的低时延的多视点 分布式视频编码系统帧排列方式， 在视点间采用视差矢量内插法， 保证了视点间边信息的 质量。在视点内部， 采用运动补偿外推法， 保证了视频的解码顺序与显示顺序的一致性， 降 低了解码时延， 同时降低了传输时延， 能够很好的满足实时性视频系统的要求。 附图说明 0009 图 1 本发明的一种低时延的多视点分布式视频编码系统帧排列方式。 具体实施方式 0010 一种低时延的多视点分布式视频编码系统帧排列方式， 按照帧的排列， 可以从两 个方向考虑 。
13、- 时间和视点。首先， 在时间方向上， 即同一个视点不同时刻的帧， 奇数视点的 前两帧都是关键帧(K帧)， 从第三帧开始出现非关键帧(WZ帧)， 此后K帧、 WZ帧交替出现。 偶数视点的前两帧是 WZ 帧， 第三帧是 K 帧， 此后 K 帧、 WZ 帧交替出现。奇数视点的前两帧外 推出后一帧， 然后把当前解码的 WZ 帧作为已解码帧与后一 K 帧外推出后面的 WZ 帧。偶数 视点的第二帧与第三帧外推出第四帧等。第二， 在视点方向上， 即不同视点同一时刻的帧， 在同一时刻的不同视点的帧的排列是 K 帧与 WZ 帧交替出现的。每个视点的 WZ 帧的边信息 是通过与之相邻的视点的同一时刻的 K 帧通。
14、过视差矢量内插法获得的。 0011 视点内部的时间边信息的生成方法为运动补偿外推法 0012 结合附图对本发明作更详细的说明。 0013 传统的棋盘型多视点分布式视频编码帧排列方式中， 在视点内部采用运动补偿内 插法， 通过当前帧的前、 后两帧作运动估计、 运动补偿等获得当前帧的时间边信息。由于涉 及到对后一帧的运动计、 运动补偿等， 这就要求必须要首先解码后一帧， 那么就导致整个视 频的解码顺序与视频的显示顺序不一致。 系统的解码时延包括解码后一帧的时延和传输后 一帧的时延。 0014 如图 1 所示， 所述的低时延的多视点分布式视频编码系统帧排列图中， 横向表示 时间， 纵向表示视点。K 。
15、代表关键帧， WZ 代表非关键帧。在时间方向上， 即同一个视点不同 时刻的帧， 奇数视点的前两帧都是K帧， 从第三帧开始出现WZ帧， 此后K帧、 WZ帧交替出现。 偶数视点的前两帧是 WZ 帧， 第三帧是 K 帧， 此后 K 帧、 WZ 帧交替出现。奇数视点的前两帧外 推出后一帧， 然后把当前解码的 WZ 帧作为已解码帧与后一 K 帧外推出后面的 WZ 帧。偶数 视点的第二帧与第三帧外推出第四帧等。第二， 在视点方向上， 即不同视点同一时刻的帧， 在同一时刻的不同视点的帧的排列是 K 帧与 WZ 帧交替出现的。每个视点的 WZ 帧的边信息 是通过与之相邻的视点的同一时刻的 K 帧通过视差矢量内。
16、插法获得的。对于本发明的低时 说 明 书 CN 103997654 A 4 3/3 页 5 延的多视点分布式视频编码的帧排列方法， 解码顺序如下 ： 对于视点之间的边信息解码， 是 先解码 1 号视点的第一帧 (K 帧 )， 同时解码 3 号视点的第一帧 (K 帧 )， 然后通过视差矢量 内插法解码 2 号视点的第一帧 (WZ 帧 )。依次按照这样的顺序， 视点间解码， 先解码 K 帧， 再由已解码的关键帧通过视差矢量内插法解码 WZ 帧。在视点内部 ( 以 1 号视点和 2 号视 点为例 )， 在 1 号视点内部， 先解码 1 号帧 (K 帧 )， 再解码 2 号帧 (K 帧 )， 然后由已。
17、解码的 2 个 K 帧， 经过运动补偿外推法获得 2 号帧 (WZ) 帧的边信息， 从而重构出 2 号帧。然后将已 解码的 3 号帧， 和解码的 4 号帧， 通过运动补偿外推法外推出 5 号帧的时间边信息， 重构出 5 号帧。在 2 号视点内部， 1 号帧和 2 号帧 (WZ 帧 ) 是通过视点间边信息得到解码的， 然后 已解码的 2 号帧与 3 号帧 (K) 帧， 通过运动补偿外推法获得 4 号帧的视点间边信息， 解码 4 号帧， 然后 4 号帧与 5 号帧外推解码 6 号帧， 以此类推其他的帧间解码， 帧间的解码， 是通过 前两帧根据运动补偿外推法得到 WZ 帧的。 0015 2 号视点内部的第 3 帧是由第 1 帧与第 2 帧通过运动补偿外推法获得的。同样的， 第 4 帧是由第 2 帧、 第 3 帧通过运动补偿外推法获得， 所以描述为第二帧与第三帧外推出第 四帧。 说 明 书 CN 103997654 A 5 1/1 页 6 图 1 说 明 书 附 图 CN 103997654 A 6 。