用视频码流中的偏移对参考图片进行重采样的方法技术

一种使用至少一个处理器对已编码视频码流进行解码的方法、设备和计算机可读介质，包括：获取指示一致性窗口未用于参考图片重采样的标志；基于所述指示一致性窗口未用于参考图片重采样的标志，确定是否有发信号通知重采样图片大小；基于确定有发信号通知重采样图片大小，基于重采样图片大小确定重采样比率；基于确定没有发信号通知重采样图片大小，基于输出图片大小确定重采样比率；以及使用重采样比率对当前图片执行参考图片重采样。对当前图片执行参考图片重采样。对当前图片执行参考图片重采样。

【技术实现步骤摘要】
【国外来华专利技术】用视频码流中的偏移对参考图片进行重采样的方法
[0001]相关申请的交叉引用
[0002]本申请要求于2019年9月24日提交的申请号为62/905,319的美国临时专利申请和于2020年9月16日提交的申请号为17/022,727的美国专利申请的优先权，这两个专利申请整体并入本申请中。


[0003]本申请所公开主题涉及视频编码和解码，更具体地涉及用重采样图片大小指示对参考图片重采样进行信令。

技术介绍

[0004]使用具有运动补偿的帧间图片预测的视频编码和解码是已知的。未压缩的数字视频可由一系列的图片组成，每个图片具有一定的空间维度，例如具有1920
×
1080的亮度样本和相关的色度样本。所述一系列的图片可以具有固定的或可变的图片速率(非正式地，也被称作帧率)，例如，每秒60个图片或60赫兹(Hz)。未压缩的视频对比特率有着显著的要求。例如，每个样本8比特的1080p60 4:2:0视频(60Hz帧率下的1920
×
1080亮度样本分辨率)需要接近1.5Gbit/s的带宽。这样的视频一小时需要超过600GB的存储空间。
[0005]视频编码和解码的一个目的可以是通过压缩来减少输入视频信号中的冗余。压缩可有助于降低上述带宽或存储空间的要求，在一些情况下，可降低两个或更多的数量级。无损压缩和有损压缩以及其组合均可以用于视频编码和解码。无损压缩是指可以由压缩的原始信号重建原始信号的精确副本的技术。当使用有损压缩时，重建的信号可能与原始信号不完全一致，但是原始信号与重建的信号之间的失真小得足以使重建的信号可以用于预期应用。有损压缩广泛应用于视频中。有损压缩容许的失真量取决于应用；例如，与电视分发应用的用户相比，某些消费者流式传输应用的用户可以容忍较高的失真。可实现的压缩比可以反映的是：可允许的/可容许的失真越高，可产生的压缩比越高。
[0006]视频编码器和解码器可以使用几大类技术，包括例如运动补偿、变换、量化和熵编码。下文将介绍这几类中的一些技术。
[0007]历史上，视频编码器和解码器倾向于在给定的图片大小上进行操作，在大多数情况下，图片大小对于已编码视频序列(Coded Video Sequence，CVS)、图片组(Group of Pictures，GOP)或类似的多图片时间帧，是定义好的并保持恒定。例如，在MPEG
‑
2中，系统设计会根据场景活动等因素，改变水平分辨率(以及从而改变图片大小)，但仅在I图片处是这样，因此这通常适用于GOP。重采样参考图片以可以在CVS中使用不同的分辨率是已知的，例如，从ITU
‑
T推荐标准H.263附录P可知。然而，因为这里的图片大小并没有改变，仅对参考图片进行重采样，从而可能导致只使用了图片画布的一部分(在下采样的情况下)，或者只采集了场景的一部分(在上采样的情况下)。此外，H.263附录Q允许以两倍(在每个维度中)向上或向下对各个宏块进行重采样。同样，图片大小保持不变。宏块的大小在H.263中是固定的，并且因此不需要发信号通知。
[0008]预测图片中图片大小有变化在现代视频编码中变得更加主流。例如，VP9允许对整个图片进行参考图片重采样和分辨率改变。类似地，针对VVC提出的某些建议(包括，例如Hendry等人的“关于VVC的自适应分辨率变化(ARC)(On adaptive resolution change(ARC)for VVC)”，联合视频小组文件JVET
‑
M0135
‑
v1，2019年1月9日至19日，其整体并入本文中)允许将整个参考图片进行重采样为不同(或高或低)的分辨率。在该文件中，建议将不同的候选分辨率编码在序列参数集中，并由图片参数集中的每图片语法元素来引用。

技术实现思路

[0009]在一实施例中，提供了一种使用至少一个处理器对已编码视频码流进行解码的方法，所述方法包括：获取指示一致性窗口未用于参考图片重采样的标志；基于所述指示一致性窗口未用于参考图片重采样的标志，确定是否有发信号通知重采样图片大小；基于确定有发信号通知所述重采样图片大小，基于所述重采样图片大小确定重采样比率；基于确定没有发信号通知所述重采样图片大小，基于输出图片大小确定所述重采样比率；以及使用所述重采样比率对当前图片执行所述参考图片重采样。
[0010]在一实施例中，提供了一种已编码视频码流解码设备，所述设备包括：至少一个存储器，被配置为存储程序代码；以及至少一个处理器，被配置为读取所述程序代码并按照所述程序代码的指令进行操作，所述程序代码包括：获取代码，被配置为使所述至少一个处理器获取指示一致性窗口未用于参考图片重采样的标志；第一确定代码，被配置为使所述至少一个处理器基于所述指示一致性窗口未用于参考图片重采样的标志，确定是否有发信号通知重采样图片大小；第二确定代码，被配置为使所述至少一个处理器基于确定有发信号通知所述重采样图片大小，基于所述重采样图片大小确定重采样比率；第三确定代码，被配置为使所述至少一个处理器基于确定没有发信号通知所述重采样图片大小，基于输出图片大小确定所述重采样比率；以及执行代码，被配置为使所述至少一个处理器使用所述重采样比率对当前图片执行所述参考图片重采样。
[0011]在一实施例中，提供了一种存储指令的非易失性计算机可读介质，所述指令包括：一个或多个指令，所述指令在由已编码视频码流解码设备的一个或多个处理器执行时使所述一个或多个处理器：获取指示一致性窗口未用于参考图片重采样的标志；基于所述指示一致性窗口未用于参考图片重采样的标志，确定是否有发信号通知重采样图片大小；基于确定有发信号通知所述重采样图片大小，基于所述重采样图片大小确定重采样比率；基于确定没有发信号通知所述重采样图片大小，基于输出图片大小确定所述重采样比率；以及使用所述重采样比率对当前图片执行所述参考图片重采样。
附图说明
[0012]从以下详细描述和附图，所公开的主题的其它特征、性质及各种优点将更加明显，其中：
[0013]图1是根据实施例的通信系统的简化框图的示意图。
[0014]图2是根据实施例的通信系统的简化框图的示意图。
[0015]图3是根据实施例的解码器的简化框图的示意图。
[0016]图4是根据实施例的编码器的简化框图的示意图。
[0017]图5是根据实施例的用于发信号通知ARC参数的选项的示意图。
[0018]图6A至图6B是根据实施例的语法表的示例的示意图。
[0019]图7是根据实施例的PPS中的信令图片大小和一致性窗口的示意图。
[0020]图8是根据实施例的PPS中的信令图片大小和一致性窗口的示意图。
[0021]图9是根据实施例的用于对已编码的视频码流进行解码的示例方法的流程图。
[0022]图10是根据实施例的计算机系统的示意图。
具体实施方式
[0023]图1是根据本申请公开的实施例的通信系统(100)的本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种使用至少一个处理器对已编码视频码流进行解码的方法，其特征在于，所述方法包括：获取指示一致性窗口未用于参考图片重采样的标志；基于所述指示一致性窗口未用于参考图片重采样的标志，确定是否有发信号通知重采样图片大小；基于确定有发信号通知所述重采样图片大小，基于所述重采样图片大小确定重采样比率；基于确定没有发信号通知所述重采样图片大小，基于输出图片大小确定所述重采样比率；以及使用所述重采样比率对当前图片执行所述参考图片重采样。2.根据权利要求1所述的方法，其特征在于，所述标志是在图片参数集中发信号通知。3.根据权利要求1所述的方法，其特征在于，所述重采样图片大小是以所述重采样图片大小的宽度和所述重采样图片大小的高度中的至少一个的方式，在所述已编码视频码流中发信号通知。4.根据权利要求3所述的方法，其特征在于，所述宽度和所述高度中的至少一个是在图片参数集中发信号通知。5.根据权利要求3所述的方法，其特征在于，所述宽度和所述高度中的至少一个表示为所述宽度和所述高度中的至少一个中所包括的亮度样本的数目。6.根据权利要求3所述的方法，其特征在于，所述宽度和所述高度中的至少一个是基于当前图片的边界与参考区域的预定亮度样本之间的至少一个偏移距离来确定。7.根据权利要求6所述的方法，其特征在于，所述至少一个偏移距离是在图片参数集中发信号通知。8.根据权利要求6所述的方法，其特征在于，所述至少一个偏移距离包括以下各项中的至少一项：当前图片的左边界与参考区域的左上亮度样本之间的水平偏移距离，当前图片的上边界与参考区域的左上亮度样本之间的垂直偏移距离，当前图片的右边界与参考区域的右下亮度样本之间的水平偏移距离，以及当前图片的下边界与参考区域的右下亮度样本之间的垂直偏移距离。9.一种已编码视频码流解码设备，其特征在于，所述设备包括：至少一个存储器，被配置为存储程序代码；以及至少一个处理器，被配置为读取所述程序代码并按照所述程序代码的指令进行操作，所述程序代码包括：获取代码，被配置为使所述至少一个处理器获取指示一致性窗口未用于参考图片重采样的标志；第一确定代码，被配置为使所述至少一个处理器基于所述指示一致性窗口未用于参考图片重采样的标志，确定是否有发信号通知重采样图片大小；第二确定代码，被配置为使所述至少一个处理器基于确定有发信号通知所述重采样图片大小，基于所述重采样图片大小确定重采样比率；第三确定代码，被配置为使所述至少一个处理器基于确定没有发信号通知所述重采样
图片大小，基于输出图片大小确定所述重采样比率；以及执行代码，被配置为使所述至少一个处理器...

【专利技术属性】
技术研发人员：崔秉斗，史蒂芬，
申请(专利权)人：腾讯美国有限责任公司，
类型：发明
国别省市：