可伸缩嵌套式SEI消息管理制造技术

本发明专利技术公开了一种视频译码机制。所述机制包括对包括一个或多个输出层集(output layer set，OLS)的码流进行编码。子码流提取过程由假设参考解码器(hypothetical reference decoder，HRD)执行，以从所述OLS中提取目标OLS。当可伸缩嵌套式补充增强信息(supplemental enhancement information，SEI)消息中没有伸缩嵌套的SEI消息参考所述目标OLS时，包括可伸缩嵌套式SEI消息的SEI网络抽象层(network abstraction layer，NAL)单元从所述码流中移除。对所述目标OLS执行一组码流一致性测试。存储所述码流，以发送给解码器。以发送给解码器。以发送给解码器。

【技术实现步骤摘要】
【国外来华专利技术】可伸缩嵌套式SEI消息管理
[0001]相关申请案交叉引用
[0002]本专利申请要求王业奎于2019年9月24日递交、申请号为62/905,244的专利技术名称为“用于多层视频码流的假设参考解码器(HRD)(Hypothetical Reference Decoder (HRD)for Multi
‑
Layer Video Bitstreams)”的美国临时专利申请的权益，该在先申请通过引用并入本文。


[0003]本专利技术大体上涉及视频译码，具体涉及假设参考解码器(hypothetical reference decoder，HRD)参数变化，以支持多层码流的高效编码和/或一致性测试。

技术介绍

[0004]即使在视频较短的情况下也需要对大量的视频数据进行描述，当数据要在带宽容量受限的通信网络中传输或以其它方式传送时，这样可能会造成困难。因此，视频数据通常要先压缩然后在现代电信网络中传输。由于内存资源可能有限，当在存储设备中存储视频时，该视频的大小也可能是一个问题。视频压缩设备通常在信源侧使用软件和/或硬件对视频数据进行编码，然后进行发送或存储，从而减少表示数字视频图像所需的数据量。然后，对视频数据进行解码的视频解压缩设备在目的地侧接收压缩数据。在网络资源有限以及对更高视频质量的需求不断增长的情况下，需要改进压缩和解压缩技术，这些改进的技术能够在几乎不影响图像质量的情况下提高压缩比。

技术实现思路

[0005]在一个实施例中，本专利技术包括一种解码器实现的方法，所述方法包括：所述解码器的接收器接收包括目标输出层集(output layer set，OLS)的码流，其中，当可伸缩嵌套式补充增强信息(supplemental enhancement information，SEI)消息中没有伸缩嵌套的SEI消息参考所述目标OLS时并且当所述可伸缩嵌套式SEI消息应用于特定OLS时，作为子码流提取过程的一部分，包括可伸缩嵌套式SEI消息的可伸缩嵌套式SEI网络抽象层(network abstraction layer，NAL)单元已从所述码流中移除；所述处理器解码来自所述目标OLS的图像。
[0006]视频译码系统采用各种一致性测试来确保码流可被解码器解码。例如，一致性检查可以包括测试整个码流的一致性，然后测试码流的每个层的一致性，最后检查潜在的可解码输出的一致性。为了实现一致性检查，对应的参数包括在码流中。假设参考解码器(hypothetical reference decoder，HRD)可以读取参数并执行测试。视频可以包括许多层和许多不同的OLS。根据请求，编码器发送选定OLS的一个或多个层。例如，编码器可以发送OLS中当前网络带宽可以支持的一个或多个最佳层。一个问题涉及OLS中包括的层。每个OLS包括至少一个输出层，配置为在解码器处显示。编码器上的HRD可以检查每个OLS是否符合标准。一致性OLS始终可以在一致性解码器上解码和显示。HRD过程可以部分通过SEI消息管
理。例如，可伸缩嵌套式SEI消息可以包括伸缩嵌套的SEI消息。每个伸缩嵌套的SEI消息可以包括与对应层相关的数据。当执行一致性检查时，HRD可以对目标OLS执行码流提取过程。与OLS中的层无关的数据通常在一致性测试之前被移除，以便可以单独检查每个OLS(例如，在传输之前)。一些视频译码系统在子码流提取过程中不会移除可伸缩嵌套式SEI消息，因为这些消息涉及多个层。这可能会产生可伸缩嵌套式SEI消息，即使可伸缩嵌套式SEI消息与目标OLS(正在提取的OLS)中的任何层都不相关时，这些可伸缩嵌套式SEI消息在子码流提取之后也保留在码流中。这可能会增加最终码流的大小，而不提供任何额外的功能。本示例包括用于减小多层码流大小的机制。在子码流提取期间，可以考虑从码流中移除可伸缩嵌套式SEI消息。当可伸缩嵌套式SEI消息与一个或多个OLS相关时，检查可伸缩嵌套式SEI消息中的伸缩嵌套的SEI消息。当伸缩嵌套的SEI消息与目标OLS中的任何层都不相关时，可以从码流中移除整个可伸缩嵌套式SEI消息。这可以减小要发送到解码器的码流的大小。因此，本示例提高了译码效率，并降低了编码器和解码器的处理器、内存和/或网络资源使用。
[0007]可选地，在任一上述方面中，提供了所述方面的另一种实现方式，其中，所述子码流提取过程由编码器上的假设参考解码器(hypothetical reference decoder，HRD)执行。
[0008]可选地，在任一上述方面中，提供了所述方面的另一种实现方式，其中，当可伸缩嵌套的OLS标志设置为1时，所述可伸缩嵌套式SEI消息应用于特定OLS。
[0009]可选地，在任一上述方面中，提供了所述方面的另一种实现方式，其中，当所述可伸缩嵌套式SEI消息不包括在0到可伸缩嵌套的OLS的数量减1(num_olss_minus1)(包括端值)的范围内的索引(i)值时，没有伸缩嵌套的SEI消息参考所述目标OLS，使得第i个嵌套OLS索引(NestingOlsIdx[i])等于与所述目标OLS关联的目标OLS索引(targetOlsIdx)。
[0010]可选地，在任一上述方面中，提供了所述方面的另一种实现方式，其中，所述可伸缩嵌套的num_olss_minus1表示应用所述可伸缩嵌套式SEI消息的OLS的数量，并且其中，可伸缩嵌套的num_olss_minus1的值被约束在0到OLS总数减1(TotalNumOlss
‑
1)(包括端值)的范围内。
[0011]可选地，在任一上述方面中，提供了所述方面的另一种实现方式，其中，所述targetOlsIdx标识所述目标OLS的OLS索引。
[0012]可选地，在任一上述方面中，提供了所述方面的另一种实现方式，其中，所述NestingOlsIdx[i]表示当所述可伸缩嵌套的OLS标志设置为1时，应用所述伸缩嵌套的SEI消息的第i个OLS的OLS索引。
[0013]在一个实施例中，本专利技术包括一种编码器实现的方法，所述方法包括：所述编码器的处理器对包括一个或多个OLS的码流进行编码；在所述处理器上运行的HRD执行子码流提取过程，以从所述OLS中提取目标OLS；当可伸缩嵌套式SEI消息中没有伸缩嵌套的SEI消息参考所述目标OLS时并且当所述可伸缩嵌套式SEI消息应用于特定OLS时，在所述处理器上运行的所述HRD从所述码流中移除包括可伸缩嵌套式SEI消息的SEI NAL单元；在所述处理器上运行的所述HRD对所述目标OLS执行一组码流一致性测试。
[0014]视频译码系统采用各种一致性测试来确保码流可被解码器解码。例如，一致性检查可以包括测试整个码流的一致性，然后测试码流的每个层的一致性，最后检查潜在的可解码输出的一致性。为了实现一致性检查，对应的参数包括在码流中。假设参考解码器(hypothetical reference decoder，HRD)可以读取参数并执行测试。视频可以包括许多层
和许多不同的OLS。本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种解码器实现的方法，其特征在于，所述方法包括：所述解码器的接收器接收包括目标输出层集(output layer set，OLS)的码流，其中，当可伸缩嵌套式补充增强信息(supplemental enhancement information，SEI)消息中没有伸缩嵌套的SEI消息参考所述目标OLS时并且当所述可伸缩嵌套式SEI消息应用于特定OLS时，作为子码流提取过程的一部分，包括可伸缩嵌套式SEI消息的可伸缩嵌套式SEI网络抽象层(network abstraction layer，NAL)单元已从所述码流中移除；所述处理器解码来自所述目标OLS的图像。2.根据权利要求1所述的方法，其特征在于，所述子码流提取过程由编码器上的假设参考解码器(hypothetical reference decoder，HRD)执行。3.根据权利要求1或2所述的方法，其特征在于，当可伸缩嵌套的OLS标志设置为1时，所述可伸缩嵌套式SEI消息应用于特定OLS。4.根据权利要求1至3中任一项所述的方法，其特征在于，当所述可伸缩嵌套式SEI消息不包括在0到可伸缩嵌套的OLS的数量减1(num_olss_minus1)(包括端值)的范围内的索引(i)值时，没有伸缩嵌套的SEI消息参考所述目标OLS，使得第i个嵌套OLS索引(NestingOlsIdx[i])等于与所述目标OLS关联的目标OLS索引(targetOlsIdx)。5.根据权利要求1至4中任一项所述的方法，其特征在于，所述可伸缩嵌套的num_olss_minus1表示应用所述可伸缩嵌套式SEI消息的OLS的数量，并且其中，可伸缩嵌套的num_olss_minus1的值被约束在0到OLS总数减1(TotalNumOlss
–
1)(包括端值)的范围内。6.根据权利要求1至5中任一项所述的方法，其特征在于，所述targetOlsIdx标识所述目标OLS的OLS索引。7.根据权利要求1至6中任一项所述的方法，其特征在于，所述NestingOlsIdx[i]表示当所述可伸缩嵌套的OLS标志设置为1时，应用所述伸缩嵌套的SEI消息的第i个OLS的OLS索引。8.一种编码器实现的方法，其特征在于，所述方法包括：所述编码器的处理器对包括一个或多个输出层集(output layer set，OLS)的码流进行编码；在所述处理器上运行的假设参考解码器(hypothetical reference decoder，HRD)执行子码流提取过程，以从所述OLS中提取目标OLS；当可伸缩嵌套式补充增强信息(supplemental enhancement information，SEI)消息中没有伸缩嵌套的SEI消息参考所述目标OLS时并且当所述可伸缩嵌套式SEI消息应用于特定OLS时，在所述处理器上运行的所述HRD从所述码流中移除包括可伸缩嵌套式SEI消息的SEI网络抽象层(network abstraction layer，NAL)单元；在所述处理器上运行的所述HRD对所述目标OLS执行一组码流一致性测试。9.根据权利要求8所述的方法，其特征在于，当可伸缩嵌套的OLS标志设置为1时，所述可伸缩嵌套式SEI消息应用于所述特定OLS。10.根据权利要求8或9所述的方法，其特征在于，当所述可伸缩嵌套式SEI消息不包括在0到可伸缩嵌套的OLS的数量减1(num_olss_minus1)(包括端值)的范围内的索引(i)值时，没有伸...

【专利技术属性】
技术研发人员：王业奎，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：