处理多视图视频制造技术

本发明专利技术涉及处理多视图视频。对视频信号进行解码包括：接收比特流，该比特流包括根据第一简表编码的视频信号以及标识第一简表的简表信息，该第一简表表示从一组多个简表中选择的简表，该多个简表包括用于多视图视频信号的至少一个简表。从该比特流提取简表信息。当确定的简表对应于多视图视频信号时，使用在各个视图中的图像的段之间的亮度补偿，根据确定的简表来解码视频信号。该多个视图的每一个包括分段成多个段的多个图像。

【技术实现步骤摘要】

本专利技术涉及处理多视图视频。
技术介绍
多视图视频编码(MVC)涉及压缩通常由对应照相机获取的视频序列(例如图像或 者“图像”序列)。视频序列或者“视图”能够根据标准例如MPEG编码。视频序列中的图像 能够表示整个视频帧或者视频帧的场。条带(slice)是图像的独立编码部分，条带包括图 像中的一些或者所有的宏块，并且宏块包括图像元素(或者“像素”)的块。视频序列能够根据H. 264/AVC编解码器技术被编码成多视图视频序列，并且很多 研发者对标准的修订进行研究以适应多视图视频序列。在当前H. 264标准中规定了用于支持特定功能的三个简表(profile)。术语“简 表(profile)”指示用于视频编码/解码算法的技术元素的标准化。换言之，简表是为解码 压缩序列的比特流而规定的一组技术元素，并且可以被认为是子标准。上述三个简表是基 线简表、主要简表和扩展简表。在H. 264标准中定义了用于编码器和解码器的各种功能，以 便编码器和解码器能够分别地与基线简表、主要简表和扩展简表兼容。根据用于处理运动图像编码(即序列编码)的视频编码层(VCL)以及与能够发送 /存储编码信息的子系统相关联的网络提取层(NAL)，构造用于H. 264/AVC标准的比特流。 编码过程的输出数据是VCL数据，并且在它被发送或者存储之前被映射成NAL单元。每一 个NAL单元包括对应于压缩视频数据或者头部信息的原始字节序列载荷(RBSP)。NAL单元包括NAL头部和RBSP。NAL头部包括标志信息(例如，nal_ref_idc)和 标识(ID)信息(例如，nal_unit_type)。标志信息“nal_ref_idC”指示用作NAL单元的参 考图像的条带是否存在。ID信息“nal_imit_type”指示NAL单元的类型。RBSP存储压缩 后的原始数据。RBSP末位能够被添加到RBSP的最后部分，从而RBSP的长度能够由8比特 的倍数来表示。存在各种NAL单元，例如，即时解码刷新(IDR)图像、序列参数集(SPS)、图像参数 集(PPS)和补充增强信息(SEI)等。该标准通常使用各种简表和级来定义目标产品，以便能够以适当成本实现目标产 品。解码器满足在对应的简表和级处的预定约束条件。简表和级能够指示解码器的功能或者参数，以便它们指示解码器能够处理哪些压 缩图像。指示多个简表中的哪一个简表对应于比特流的特定信息能够利用简表ID信息来 标识。简表ID信息“profilejdc”提供用于标识与比特流相关联的简表的标志。H. 264/ AVC标准包括三个简表标识符(ID)。如果简表ID信息“profilejdc”被设为“66”，则比特流基于基线简表。如果简表ID信息“profilejdc”被设为“77”，则比特流基于主要简表。 如果简表ID信息“profilejdc”被设为“88”，则比特流基于扩展简表。上述“profile_ idc”信息可以例如被包含在SPS(序列参数集)中。
技术实现思路
在一个方面，通常，一种用于解码视频信号的方法包括接收比特流，该比特流包 括根据第一简表编码的视频信号和标识该第一简表的简表信息，第一简表表示从包括用于 多视图视频信号的至少一个简表的一组多个简表中做出的选择；从该比特流提取简表信 息；以及当确定的简表对应于多视图视频信号时，使用在对应的视图中的图像的段之间的 亮度补偿，根据确定的简表来解码视频信号，其中该多个视图的每一个包括分段成多个段 (例如，图像块段例如单块或者宏块，或者例如图像条带的段)的多个图像。本专利技术的方面能够包括下面的特征中的一个或者多个。该方法还包括当确定的简表对应于多视图视频信号时，从比特流中提取与多个 视图相关联的配置信息，其中，该配置信息包括如下信息中的至少一个表示在各个视图之 间的依赖关系的视图依赖信息、指示参考视图的视图标识信息、指示视图数目的视图数目 信息、用于提供视图缩放性的视图级信息以及指示照相机布局的视图布局信息。简表信息位于比特流的头部中。视图级信息对应于在多视图视频信号的视图中与层级(hierachical)视图预测 结构相关联的多个级中的一个。视图依赖信息以二维数据结构表示依赖关系。二维数据结构包括矩阵。段包括图像块。对于第一段使用亮度补偿包括通过形成包括用于相邻块的亮度补偿的预测器 (predictor)和残值(residual value)的和，获得用于相邻块的亮度补偿的偏移值。该方法还包括按照其中一个或者多个竖直或者水平相邻者之后跟着一个或者多 个对角相邻者的次序，根据对于相邻块来说是否满足一个或者多个条件，来选择至少一个 相邻块。选择至少一个相邻块包括按照以下顺序判定对于相邻块来说是否满足一个或者 多个条件左相邻块，随后为上相邻块，随后为右上相邻块，随后为左上相邻块。判定对于相邻块来说是否满足一个或者多个条件包括从比特流中提取与相邻块 相关联的值，该值指示是否需要执行相邻块的亮度补偿。选择至少一个相邻块包括判定使用用于单个相邻块的亮度补偿的偏移值还是使 用用于对应的相邻块的亮度补偿的多个偏移值。在另一方面，通常，一种用于解码多视图视频信号的方法包括接收比特流，该比 特流包括多视图视频信号以及表示依赖关系的视图依赖数据，该多视图视频信号根据在各 个视图之间的依赖关系编码；提取视图依赖数据，并且根据所提取的数据来确定依赖关系； 以及使用在各个视图中的图像的段之间的亮度补偿，根据确定的依赖关系，来解码多视图 视频信号，其中，所述多视图视频信号包括多个视图，每一个视图均包括分段成多个段的多 个图像。本专利技术的方面能够包括下面的特征中的一个或者多个。视图依赖数据以二维数据结构表示依赖关系。视图依赖数据包括矩阵。该方法还包括从比特流提取配置信息，该配置信息包括以下信息中的至少一个 指示参考视图的视图标识信息、指示视图数目的视图数目信息、用于提供视图缩放性的视 图级信息以及指示照相机布局的视图布局信息。段包括图像块。对于第一段使用亮度补偿包括通过形成包括用于相邻块的亮度补偿的预测器和 残值的和，获得用于相邻块的亮度补偿的偏移值。该方法还包括按照在一个或者多个竖直或者水平相邻者后面跟着一个或者多个 对角相邻者的次序，根据对于相邻块来说是否满足一个或者多个条件，来选择至少一个相 邻块。选择至少一个相邻块包括按照以下顺序判定对于相邻块来说是否满足一个或者 多个条件左相邻块，随后为上相邻块，随后为右上相邻块，随后为左上相邻块。判定对于相邻块来说是否满足一个或者多个条件包括从比特流提取与相邻块相 关联的值，该值指示是否将要执行相邻块的亮度补偿。选择至少一个相邻块包括判定使用用于单个相邻块的亮度补偿的偏移值还是使 用用于各个相邻块的亮度补偿的多个偏移值。该方法还包括当将要使用多个偏移值时，通过组合多个偏移值来获得用于执行 第一块的亮度补偿的预测器。组合该多个偏移值包括求取偏移值的平均值或者中值。在另一方面，通常，对于每一个对应的解码方法来说，一种用于编码视频信号的方 法包括产生能够利用对应的解码方法被解码成视频信号的比特流。例如，在另一方面，通 常，一种用于编码比特流的方法包括根据第一简表形成比特流，该第一简表表示从一组多 个简表中进行的选择，该组多个简表包括用于多视图视频本文档来自技高网...

【技术保护点】
一种解码多视图视频数据流中的多视图视频数据的方法，所述方法包括：从多视图视频数据流中获取随机访问图像的视图间预测结构信息，所述视图间预测结构信息指示多个视图之间的参考关系；获取视图间预测的随机访问标志，当网络提取层ＮＡＬ单元类型表示多视图视频数据的扩展数据时，所述随机访问标志指示当前图像的类型是否是随机访问图像，所述随机访问图像中的所有条带仅参考具有相同时间位置并且位于所述多视图视频数据的不同视图中的条带；当根据所述随机访问标志，所述当前图像的类型表示随机访问图像时，使用所述随机访问图像的视图间预测结构信息来导出所述当前图像的预测值；使用所述预测值来解码所述当前图像；其中，所述多视图视频数据包括基础视图和辅助视图的视频数据，所述基础视图指示不使用视图间预测独立于其它视图而解码的视图，所述辅助视图是除所述基础视图之外的视图。

【技术特征摘要】
KR 2006-1-17 10-2006-0004956;US 2006-7-5 60/818,27一种解码多视图视频数据流中的多视图视频数据的方法，所述方法包括从多视图视频数据流中获取随机访问图像的视图间预测结构信息，所述视图间预测结构信息指示多个视图之间的参考关系；获取视图间预测的随机访问标志，当网络提取层NAL单元类型表示多视图视频数据的扩展数据时，所述随机访问标志指示当前图像的类型是否是随机访问图像，所述随机访问图像中的所有条带仅参考具有相同时间位置并且位于所述多视图视频数据的不同视图中的条带；当根据所述随机访问标志，所述当前图像的类型表示随机访问图像时，使用所述随机访问图像的视图间预测结构信息来导出所述当前图像的预测值；使用所述预测值来解码所述当前图像；其中，所述多视图视频数据包括基础视图和辅助视图的视频数据，所述基础视图指示不使用视图间预测独立于其它视图而解码的视图，所述辅助视图是除所述基础视图之外的视图。2.根据权利要求1所述的方法，其中，所述视图间预测结构信息包括数目信息和视图 标识信息，所述数目信息指示在所述多视图视频数据中的视图的总数，并且所述视图标识 信息提供所述多视图视频数据中的每个参考视图的视图标识符。3.根据权利要求1所述的方法，其中，从序列区域获取所述视图间预测结构信息。4.根据权利要求1所述的方法，其中，通过考虑预测方向来获取所述随机访问图像的 视图间预测结构信息。5.根据权利要求4所述的方法，其中，所述预测方向以图像输出顺序来表示向前方向 或向后方向。6.根据权利要求...

【专利技术属性】
技术研发人员：梁正休，
申请(专利权)人：LG电子株式会社，
类型：发明
国别省市：KR[韩国]