用于小子块仿射帧间预测的方法和装置制造方法及图纸

技术编号:30343253 阅读:21 留言:0更新日期:2021-10-12 23:23
本申请各方面提供视频解码的方法和装置。一些例子中,视频解码的装置包括处理电路。该处理电路用于对已编码视频码流中当前图像中的块的预测信息进行解码。预测信息指示帧间预测模式中的仿射模型。该处理电路用于根据所述仿射模型确定所述块的控制点的运动矢量。该处理电路用于根据确定的所述控制点的运动矢量来确定所述块的子块的运动矢量,所述子块的宽度和高度之一小于4。此外,该处理电路用于根据确定的所述运动矢量,重建所述子块的至少一个样本。样本。样本。

【技术实现步骤摘要】
【国外来华专利技术】用于小子块仿射帧间预测的方法和装置
相关文件
[0001]本申请要求2019年3月13日提交的第62/818,068号美国临时申请案“使用小子块的仿射帧间预测(Affine Inter Prediction with Small Subblocks)”的优先权、2020年3月12日递交的第16/816,562号美国申请案“使用小子块的仿射帧间预测方法及装置(Method and Apparatus for Affine Inter Prediction with Small Subblocks)”的优先权,所述申请以全文引用方式并入本申请。


[0002]本申请实施例涉及视频编解码领域。

技术介绍

[0003]本文提供的背景描述是为了呈现本申请的背景。记名的专利技术人的工作,在该背景部分描述的工作以及本说明书各实施例的范围内的内容,在递交时可能并不算作现有技术,均未被明示或暗示地承认作为不利于本申请的现有技术。
[0004]目前,可使用帧间图像预测结合运动补偿来执行视频编码和解码。未压缩的数字视频通常包括一系列图像。例如,每个图像具有1920
×
1080分辨率的亮度采样和相关的色度采样。所述一系列图像可具有例如每秒60个图像或60Hz的固定或可变图像速率(也被称作帧率)。因此,未压缩视频具有显著的位速率要求。举例来说,每采样8位的1080p60 4:2:0视频(60Hz帧率下的1920
×
1080亮度采样分辨率)需要接近1.5Gbit/s的带宽。长度为一小时的此类视频需要超过600GB的存储空间。
[0005]视频编码和解码的一个目的可以是通过压缩来减少输入视频信号中的冗余。压缩有助于降低上述带宽或存储空间要求,在一些情况下可降低两个数量级或更多。通常情况下,可使用无损压缩和有损压缩以及其组合。无损压缩是指可从压缩的原始信号重建原始信号的精确副本的技术。当使用有损压缩时,重建的信号可能与原始信号不同,但原始信号与重建的信号之间的失真很小,因而重建的信号能够实现所期望的用途。视频领域中广泛采用有损压缩。容许的失真量因不同应用而异。例如,消费型直播应用的用户比电视节目应用的用户能容忍更高的失真。可实现的压缩比可反映出:可允许的/可容许的失真越高,可产生的压缩比越高。
[0006]运动补偿可以是有损压缩技术,且可关联以下技术:对于来自先前已重建的图像或其中一部分(参考图像)的样本数据块,在由运动矢量(motion vector,MV)指示的方向上发生空间偏移之后,可用于预测新重建的图像或图像的一部分。在一些情况下,参考图像可与当前正在重建的图像相同。各个MV可具有两个维度X和Y,或三个维度,第三维度指示正在使用的参考图像(间接地,第三维度还可以是时间维度)。
[0007]在一些视频压缩技术中,可根据其它MV预测适用于某一样本数据区域的MV,所述其它MV例如是,与正在重建的区域空间相邻近的另一样本数据区域相关、且解码次序是在所述某一样本数据区域的MV之前。如此,可极大减少对MV进行编码所需的数据量,由此消除
冗余且提高压缩。举例来说,当对来自相机的输入视频信号(称为原始视频)进行编码时,存在如下的统计可能性:比单个MV区域更大的多个区域会在相似的方向上移动,因此,在一些情况下,可使用从相邻区域的MV提取的相似运动矢量进行预测,因此,MV预测非常有效。采用这种方式,使得针对给定区域确定的MV与根据周围MV预测的MV类似或相同,且在熵编码之后,表示MV的位数小于在对MV直接编码的情况下所使用的位数。在一些情况下,MV预测可以是针对从原始信号(即:样本流)提取的信号(即:MV)进行无损压缩的实施例。在其它情况下,MV预测本身可能是有损的,例如,在根据周围若干MV计算预测因子时,由于化整误差导致的有损。
[0008]H.265/HEVC(ITU

T H.265建议书,“高效视频编解码(High Efficiency Video Coding)”,2016年12月)中描述了各种MV预测机制。在H.265提供的多种MV预测机制中,本申请描述的是下文称作“空间合并”的技术。
[0009]请参考图1,当前块(101)包括在运动搜索过程期间已由编码器发现的样本,根据已产生空间偏移的相同大小的先前块,可预测所述样本。另外,可从一个或多个参考图像相关联的元数据中得出所述MV,而非对MV直接编码。例如,使用关联于A0、A1和B0、B1、B2(分别对应102到106)五个周围样本中的任一样本的MV,(按解码次序)从最近的参考图像的元数据中得出所述MV。在H.265中,MV预测可使用相邻块也正在使用的相同参考图像的预测因子。

技术实现思路

[0010]本申请各方面提供了用于视频编码/解码的方法和装置。一些示例中,视频解码的装置包括处理电路。一个实施例中,从已编码的视频码流中解码当前图像中的块的预测信息。预测信息指示帧间预测模式中的仿射模型。根据仿射模型确定块的控制点的运动矢量。根据确定的控制点的运动矢量确定该块的子块的运动矢量。子块的宽度和高度之一小于4。此外,根据确定的运动矢量来重建子块的至少一个样本。
[0011]一个实施例中,根据所确定的块的控制点的运动矢量来确定块中的4x4块的运动矢量,该4x4块包括该子块。
[0012]一个实施例中,将所确定的4x4块的运动矢量存储在存储器中。
[0013]一个实施例中,当子块在块中4x4块的左上区域时,将确定的子块的运动矢量存储在存储器中。
[0014]一个实施例中,当子块在块中的4x4块的右下区域时,将确定的子块的运动矢量存储在存储器中。
[0015]一个实施例中,当子块包括块中的4
×
4块的中心样本时,将确定的子块的运动矢量存储在存储器中。
[0016]一个实施例中,当子块是色度块时,该色度块具有固定的尺寸,与相应的亮度块的尺寸无关。
[0017]一个实施例中,帧间预测模式是单向预测。
[0018]一个实施例中,当帧间预测模式是单向预测、且包括子块的8
×
8块的运动补偿的存储器带宽小于或等于阈值时,根据控制点的运动矢量来确定块的子块的运动矢量。
[0019]一个实施例中,接收指示符,该指示符指示小子块仿射模式是用于当前图像还是
用于当前图像中的图块组。此外,当接收到的指示符指示使用小子块仿射模式时,执行上述解码、确定控制点的运动矢量、确定子块的运动矢量以及重建的步骤。
[0020]本申请各方面还提供了一种非易失性计算机可读介质,存储有指令,在由计算机执行时,该指令用于使计算机执行视频解码方法中的任何一种或多种方法的组合。
附图说明
[0021]为使所公开主题的特征、原理和各种优势更清楚,以下对说明书和附图进行详细描述。附图中:
[0022]图1是一个实施例的当前块及其周围的空间合并候选项的示意图。
[0023]图2是一个实施例的通信系统(200)本文档来自技高网
...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种在解码器中进行视频解码的方法,其特征在于,包括:对已编码视频码流中当前图像中的块的预测信息进行解码,所述预测信息指示帧间预测模式中的仿射模型;根据所述仿射模型确定所述块的控制点的运动矢量;根据确定的所述控制点的运动矢量来确定所述块的子块的运动矢量,所述子块的宽度和高度之一小于4;及根据确定的所述运动矢量,重建所述子块的至少一个样本。2.根据权利要求1所述的方法,其特征在于,进一步包括:根据确定的所述块的控制点的运动矢量来确定所述块中的4
×
4块的运动矢量,所述4
×
4块包括所述子块。3.根据权利要求2所述的方法,其特征在于,进一步包括:将确定的所述4
×
4块的运动矢量存储在存储器中。4.根据权利要求1所述的方法,其特征在于,进一步包括:当所述子块在所述块中的4
×
4块的左上区域处时,将确定的所述子块的运动矢量存储在存储器中。5.根据权利要求1所述的方法,其特征在于,进一步包括:当所述子块在所述块中的4
×
4块的右下区域处时,将确定的所述子块的运动矢量存储在存储器中。6.根据权利要求1所述的方法,其特征在于,进一步包括:当所述子块包括所述块中的4
×
4块的中心样本时,将确定的所述子块的运动矢量存储在存储器中。7.根据权利要求1所述的方法,其特征在于:当所述子块是色度块时,所述色度块具有固定尺寸,与对应的亮度块的尺寸无关。8.根据权利要求1所述的方法,其特征在于:所述帧间预测模式是单向预测。9.根据权利要求1所述的方法,其特征在于,确定所述子块的运动矢量包括:当所述帧间预测模式是单向预测、且包括所述子块的8
×
8块的运动补偿的存储器带宽小于或等于阈值时,根据所述控制点的运动矢量来确定所述块的所述子块的所述运动矢量。10.根据权利要求1所述的方法,其特征在于,进一步包括:接收指示符,所述指示符指示小子块仿射模式是否用于所述当前图像或所述当前图像中的图块组;及当接收到的所述指示符指示使用所述小子块仿射模式时,执行所述解码、所述确定控制点的运动矢量、所述确定子块的运动矢量,以及所述重建的步骤。11.一种装置,其特征在于,包括:处理电路,用于:对已编码视频码流中当前图像中的块的预测信息进行解码,所述预测信息指示帧间预测模式中的仿射模型;根据所述仿射模型确定所述块的控制点的运动矢量;
根据确定的所述控制点的...

【专利技术属性】
技术研发人员:李贵春李翔许晓中刘杉
申请(专利权)人:腾讯美国有限责任公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1