用于可分级视频编码的运动矢量预测的方法和装置制造方法及图纸

层间运动映射信息可被用来使能比特流中的增强层的时间运动矢量预测(TMVP)。例如，可确定层间视频块的运动矢量(MV)和参考图像。可根据并置基础层视频块来确定参考图像。例如，参考图像可以是并置基础层视频块的参考图像的并置层间参考图像。可根据并置基础层视频块的MV来确定MV。例如，可通过确定并置基础层视频块的MV和根据基础层和增强层间的空间比率来缩放并置基础层视频块的MV，从而确定MV。可使用层间视频块的MV在增强层图像上执行TMVP。

【技术实现步骤摘要】
【国外来华专利技术】用于可分级视频编码的运动矢量预测的方法和装置相关申请的交叉引用本申请要求2012年8月29日提交的美国临时专利申请No.61/694,555、2012年12月7日提交的美国临时专利申请No.61/734,650和2013年8月16日提交的美国临时专利申请No.61/866,822的权益，其内容以引用的方式结合于此。
技术介绍
过去的二十年中，数字视频压缩技术有了很大发展并且被标准化，使高效的数字视频通信、分发和消费成为可能。大部分在商业上被广泛应用的标准由ISO/IEC和ITU-T开发，例如MPEC-2和H.263(MPEG-4第10部分)。由于视频压缩技术的出现和成熟，开发出了高效视频编码(HEVC)。相比于传统的通过卫星、电缆和陆地传输通道的数字视频服务，异构网络中在客户端和网络侧可使用越来越多的视频应用，例如但不限于视频聊天、移动视频和流媒体。智能电话、平板电脑和TV主宰着客户端侧，其中视频可通过因特网、移动网络和/或这两者的结合来传输。为改善用户体验和视频服务质量，可进行可分级视频编码(SVC)。在SVC中，信号一旦在最高的分辨率下被编码，能从数据流的子集中根据应用所需并且客户端设备所支持的特定速率和分辨率被解码。国际视频标准MPEC-2视频、H.263、MPEG4可视和H.264具有支持可分级性模式的工具和/或配置文件。
技术实现思路
层间运动映射信息用于使能比特流中的增强层的时间运动矢量预测(TMVP)。举例来说，可基于并置基础层视频块来确定增强层视频块的参考图像。增强层视频块与比特流中的增强层相关联，而并置基础层视频块与比特流中的基础层相关联。举例来说，增强层视频块与增强层图像相关联，而并置基础层视频块与基础层图像相关联。可通过选择与增强层视频块的重叠面积最大为特征的并置基础层图像中的视频块来确定并置基础层视频块。视频块可以是在比特流的任意级别的运算单元。视频块可以是任意大小(举例来说，块大小(例如，16x16)，PU，SPU等)。可通过确定并置基础层视频块的参考图像来确定增强层视频块的参考图像。增强层视频块的参考图像可以是并置基础层视频块的参考图像的并置增强层图像。可确定并置基础层视频块的参考图像、利用并置基础层视频块的参考图像来确定层间视频块的参考图像并利用层间视频块的参考图像来确定增强层视频块的参考图像，以此来确定增强层视频块的参考图像。层间视频块可以是与增强层视频块和/或基础层视频块并置(collocate)。可根据并置基础层视频块的运动矢量(MV)来确定增强层视频块的MV。可确定并置基础层视频块的MV并且根据基础层和增强层间的空间比率来缩放并置基础层视频块的MV以确定增强层视频块的MV，以此来确定增强层视频块的MV。可确定并置基础层视频块的MV、根据基础层和增强层间的空间比率来缩放并置基础层视频块的MV来确定层间视频块的MV并根据层间视频块的MV来预测增强层视频块的MV，以此来确定增强层视频块的MV。例如，可基于层间视频块的MV，通过在层间视频块的MV上执行时间缩放来预测增强层视频块的MV。层间视频块可与增强层视频块和/或基础层视频块并置。可在增强层视频块上使用层间视频块的MV和/或参考图像来执行TMVP。可根据增强层视频块的参考图像和/或MV和/或层间视频块的参考图像和/或MV来解码增强层视频块。方法包括接收包含基础层和增强层的比特流，以及利用时间运动矢量预测(TMVP)来解码被编码的比特流中的增强层。层间参考图像可被用作用于增强层TMVP的并置参考图像。利用TMVP来解码被编码的比特流中的增强层可包括利用TMVP来解码增强层图像。利用TMVP来解码增强层图像可包括确定层间参考图像的运动矢量(MV)域和根据层间参考图像的MV域来解码增强层图像。可根据并置基础层图像的MV域来确定层间参考图像的MV域。MV域包括层间参考图像的视频块的参考图像索引和MV。举例来说，MV域可包括层间参考图像的一个或多个视频块的一个或多个索引值(举例来说，根据它是P切片(slice)还是B切片(slice))和MV。确定层间参考图像的MV域可包括确定并置基础层图像的被压缩的MV域和根据该并置基础层图像的被压缩的MV域来确定层间参考图像的MV域。确定层间参考图像的MV域可包括确定层间参考图像的视频块的MV和参考图像。确定层间参考图像的视频块的MV和参考图像可包括根据并置基础层视频块的参考图像来确定层间视频块的参考图像和根据并置基础层视频块的MV来确定层间视频块的MV。可通过选择与层间参考图像的重叠面积最大为特征的并置基础层图像中的视频块来确定并置基础层视频块。确定层间视频块的参考图像可包括确定并置基础层视频块的参考图像和确定层间视频块的参考图像。层间视频块的参考图像可以是并置基础层视频块的参考图像的并置层间参考图像。确定层间视频块的MV可包括确定并置基础层视频块的MV和根据基础层和增强层间的空间比率来缩放并置基础层视频块的MV，以确定层间视频块的MV。可根据层间视频块的MV域来确定增强层视频块的MV域。增强层视频块可与中间层视频块和/或基础层视频块并联。举例来说，可根据层间视频块的参考图像(例如，可能是并置增强层图像)来确定增强层视频块的参考图像。可根据层间视频块的MV来确定增强层视频块的MV。举例来说，可缩放(例如，时间的缩放)层间视频块的MV来确定增强层视频块的MV。可根据增强层视频块的MV域来解码增强层视频块。方法包括接收包含基础层和增强层的比特流和层间运动映射信息，以及执行增强层的层间运动预测。可确定根据层间映射信息使能对于增强层的层间运动预测。可在比特流的序列级用信号发出层间映射信息。举例来说，层间映射信息可以是变量(例如标志)，可在比特流的序列级用信号发出该变量。可在比特流的序列级上推断出层间映射信息。可通过比特流的视频参数集(VPS)中的变量(例如标志)来用信号发出层间映射信息(例如，层间映射信息可以是比特流的VPS中的标志)。举例来说，可通过比特流的序列参数集(SPS)中的变量(标志)来用信号发出层间映射信息(例如，层间映射信息可以是比特流形式的SPS中的标志)。举例来说，可通过比特流的图像参数集(PPS)中的变量(标志)来用信号发出层间映射信息(例如，层间映射信息可以是比特流的PPS中的标志)。附图说明图1是示出用于SVC空间可分级编码的包含额外的层间预测的可分级结构的示例图。图2是示出被考虑用于HEVC可分级编码的示例层间预测结构图。图3是示出空间运动矢量(MV)预测(SMVP)的示例图。图4是示出时间MV预测(TMVP)的示例图。图5是示出从基础层到经上采样的基础层的预测结构复制的示例图。图6是示出经上采样的基础层的SPU和原始基础层的SPU间的示例关系图。图7A-图7C是示出基础层图像的切片和处理后的基础层图像的切片间的示例关系图。图8A是示出时间短期MV间的MV预测图。图8B是示出根据被映射的短期MV对时间短期MV的MV预测图。图9A是示出时间长期MV间的MV预测的示例图。图9B是示出根据被映射的长期MV对时间长期MV的MV预测的示例图。图10A是示出根据时间长期MV对时间短期MV的MV预测的示例图。图10B是示出根据被映射的长期MV对时间短期MV的MV预测的示例图。图10本文档来自技高网...

【技术保护点】
一种方法，该方法包括：接收比特流，所述比特流包括基础层和增强层；以及采用时间运动矢量预测(TMVP)来解码所述比特流中的所述增强层，其中层间参考图像被用作所述增强层的TMVP的并置参考图像。

【技术特征摘要】
【国外来华专利技术】2012.08.29 US 61/694,555;2012.12.07 US 61/734,650;1.一种方法，该方法包括：接收比特流，所述比特流包括基础层和增强层；将层间图像添加到增强层图像的参考图像列表中；以及采用时间运动矢量预测(TMVP)来解码所述增强层图像，其中所述层间图像被用作所述增强层图像的TMVP的并置图像。2.根据权利要求1所述的方法，其中所述层间图像包括来自并置基础层图像的纹理、根据所述并置基础层图像的运动矢量的可缩放运动矢量、以及从与所述并置基础层图像相关联的参考图像索引值确定的参考图像索引值。3.根据权利要求1所述的方法，其中采用TMVP解码所述增强层图像包括：根据并置基础层图像的运动矢量(MV)域来确定所述层间图像的MV域；以及根据所述层间图像的MV域来解码所述增强层图像。4.根据权利要求3所述的方法，其中根据所述层间图像的所述MV域来解码所述增强层图像包括：根据所述层间图像的MV域来确定所述增强层图像的MV域；以及根据所述增强层图像的所述MV域来解码所述增强层图像。5.根据权利要求3所述的方法，其中确定所述层间图像的所述MV域包括：确定所述并置基础层图像的被压缩的MV域；以及根据所述并置基础层图像的所述被压缩的MV域来确定所述层间图像的所述MV域。6.根据权利要求3所述的方法，其中所述层间图像的所述MV域包括所述层间图像的视频块的MV和参考图像索引。7.根据权利要求6所述的方法，其中确定所述层间图像的视频块的MV和参考图像包括：根据并置基础层视频块的参考图像来确定所述层间视频块的所述参考图像；以及根据所述并置基础层视频块的MV来确定所述层间视频块的所述MV。8.根据权利要求7所述的方法，其中确定所述层间视频块的所述参考图像包括：确定所述并置基础层视频块的参考图像；以及确定所述层间视频块的所述参考图像，其中所述层间视频块的所述参考图像是所述并置基础层视频块的所述参考图像的并置层间图像。9.根据权利要求7所述的方法，其中确定所述层间视频块的所述MV包括：确定所述并置基础层视频块的所述MV；以及根据所述基础层与所述增强层之间的空间比率来缩放所述并置基础层视频块的所述MV，以确定所述层间视频块的所述MV。10.一种方法，该方法包括：确定层间图像的运动矢量(MV)域；根据所述层间图像的MV域，采用时间运动矢量预测(TMVP)来预测增强层图像的MV域；以及根据所述增强层图像的所述MV来解码所述增强层图像。11.根据权利要求10所述的方法，其中所述层间图像与所述增强层图像并置。12.根据权利要求...

【专利技术属性】
技术研发人员：修晓宇，叶琰，Y·何，贺玉文，
申请(专利权)人：VID拓展公司，
类型：发明
国别省市：美国;US