参考图片重采样与视频编解码工具之间的相互作用制造技术

视频处理的示例方法包括：对于视频的当前图片和视频的比特流表示之间的转换，基于与多个参考图片或当前图片中的一个的部分的维度相关联的条件，确定编解码工具的使用。该方法还包括基于确定执行转换。还包括基于确定执行转换。还包括基于确定执行转换。

【技术实现步骤摘要】
【国外来华专利技术】参考图片重采样与视频编解码工具之间的相互作用
[0001]相关申请的交叉引用
[0002]根据适用的专利法和/或根据《巴黎公约》的规则，本申请是为了及时要求于2019年10月13日提交的美国临时专利申请No.62/914,544的优先权和利益而做出的。出于法律规定的所有目的，将上述申请的全部公开通过引用的方式并入，作为本申请公开的一部分。


[0003]本专利文件涉及视频编解码技术、设备和系统。

技术介绍

[0004]目前，正在努力提高当前视频编解码器技术的性能，以提供更好的压缩比，或者提供允许较低复杂度或并行实现的视频编解码方案。业内专家最近提出了几种新的视频编解码工具，目前正在进行测试以确定其有效性。

技术实现思路

[0005]描述了与数字视频编解码，特别是与运动矢量的管理有关的设备、系统和方法。所述方法可应用于现有视频编解码标准(例如，高效视频编解码(HEVC)或多功能视频编解码)和未来的视频编解码标准或视频编解码器。
[0006]在一个代表性方面，所公开的技术可用于提供用于视频处理的方法。该方法包括：执行当前视频块和当前视频块的编解码表示之间的转换，其中，在转换期间，如果参考图片的分辨率和/或尺寸不同于当前视频块的分辨率和/或尺寸，则将相同的插值滤波器应用于使用当前视频块预测的一组相邻的或非相邻样点。
[0007]在另一个代表性方面，所公开的技术可用于提供用于视频处理的另一种方法。该方法包括：在当前视频块和当前视频块的编解码表示之间执行转换，其中，在转换期间，如果参考图片的分辨率和/或尺寸与当前视频块的分辨率和/或尺寸不同，则其中使用当前视频块预测的块仅允许使用与当前块相关的整数值运动信息。
[0008]在另一个代表性方面，所公开的技术可用于提供用于视频处理的另一种方法。该方法包括：在当前视频块和当前视频块的编解码表示之间执行转换，其中，在转换期间，如果参考图片的分辨率和/或尺寸不同于当前视频块的分辨率和/或尺寸，则应用插值滤波器来导出使用当前视频块预测的块，并且其中基于规则选择插值滤波器。
[0009]在另一个代表性方面，所公开的技术可用于提供用于视频处理的另一种方法。该方法包括：在当前视频块和当前视频块的编解码表示之间执行转换，其中，在转换期间，如果参考图片的分辨率和/或尺寸不同于当前视频块的分辨率和/或尺寸，则选择性地应用去块滤波器，其中根据与参考图片的分辨率和/或尺寸相对于当前视频块的分辨率和/或尺寸有关的规则设置去方块滤波器。
[0010]在另一个代表性方面，所公开的技术可用于提供用于视频处理的另一种方法。该方法包括：在当前视频块和当前视频块的编解码表示之间执行转换，其中，在转换期间，根
据基于当前视频块的维度的规则对当前视频块的参考图片进行重采样。
[0011]在另一个代表性方面，所公开的技术可用于提供用于视频处理的另一种方法。该方法包括：在当前视频块和当前视频块的编解码表示之间执行转换，其中，在转换期间，取决于相对于当前视频块的分辨率/尺寸的当前视频块的参考图片的分辨率/尺寸，选择性地启动或禁止对当前视频块的编解码工具的使用。
[0012]在另一个代表性方面，所公开的技术可用于提供用于视频处理的另一种方法。该方法包括：在多个视频块和多个视频块的编解码表示之间执行转换，其中，在转换期间，为第一视频块定义第一一致性窗口，为第二视频块定义第二一致性窗口，并且其中，所述第一一致性窗口与所述第二一致性窗口的宽度和/或高度的比率符合至少基于一致性比特流的规则。
[0013]在另一个代表性方面，所公开的技术可用于提供用于视频处理的另一种方法。该方法包括：在多个视频块和多个视频块的编解码表示之间执行转换，其中，在转换期间，为第一视频块定义第一一致性窗口，为第二视频块定义第二一致性窗口，其中，所述第一一致性窗口与所述第二一致性窗口的宽度和/或高度的比率符合至少基于一致性比特流的规则。
[0014]此外，在一个代表性方面，公开了一种视频系统中的装置，该装置包括处理器和带有指令的非暂时性存储器。处理器执行时的指令使处理器实现所公开的方法中的任何一个或多个。
[0015]在一个代表性方面中，公开了一种视频解码装置，其包括配置成实现本文所述的方法的处理器。
[0016]在一个代表性方面中，公开了一种视频编码装置，其包括配置成实现本文所述的方法的处理器。
[0017]此外，还公开了存储在非暂时性计算机可读介质上的计算机程序产品，该计算机程序产品包括用于执行所公开的方法中的任何一个或多个的程序代码。
[0018]在附图、说明书和权利要求中更详细地描述了所公开技术的上述和其他方面和特征。
附图说明
[0019]图1示出了子块运动矢量(VSB)和运动矢量差的示例。
[0020]图2示出了划分为16个4x4区域的16x16视频块的示例。
[0021]图3A示出了样点中的特定位置的示例。
[0022]图3B示出了样点中特定位置的另一示例。
[0023]图3C示出了样点中特定位置的又一示例。
[0024]图4A示出了当前样点及其参考样点的位置的示例。
[0025]图4B示出了当前样点及其参考样点的位置的另一示例。
[0026]图5是用于实现本文档中描述的视觉媒体解码或视觉媒体编解码技术的硬件平台的示例的框图。
[0027]图6示出用于视频编解码的示例方法的流程图。
[0028]图7示出了解码器侧运动矢量细化的示例。
[0029]图8示出了VTM5.0中级联的DMVR和BDOF处理的流程示例。DMVR SAD操作和BDOF SAD操作不同且不共享。
[0030]图9是其中可以实现所公开的技术的示例性视频处理系统的框图。
[0031]图10是示出示例性视频编解码系统的框图。
[0032]图11是示出根据本公开的一些实施例的编码器的框图。
[0033]图12是示出根据本公开的一些实施例的解码器的框图。
[0034]图13是根据本技术的用于视频处理的方法的流程图表示。
[0035]图14是根据本技术的用于视频处理的另一方法的流程图表示。
[0036]图15是根据本技术的另一种视频处理方法的流程图表示。
具体实施方式
[0037]1.HEVC/H.265中的视频编解码
[0038]视频编解码标准主要是通过众所周知的ITU
‑
T和ISO/IEC标准的发展而发展起来的。ITU
‑
T制作了H.261和H.263，ISO/IEC制作了MPEG
‑
1和MPEG
‑
4视频，两个组织联合制作了H.262/MPEG
‑
2视频和H.264/MPEG
‑
4高级视频编解码(AVC)和H.265/HEVC标准。自H.262以来，视频编解码标准基于混合视频编解码结构，其中使用时域预测本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种用于视频处理的方法，包括：对于视频的当前图片和所述视频的比特流表示之间的转换，基于与多个参考图片中的一个图片的部分或所述当前图片的维度相关联的条件，来确定编解码工具的使用；以及基于所述确定执行所述转换。2.根据权利要求1所述的方法，其中所述使用包括是否为所述当前图片启用所述编解码工具。3.根据权利要求1或2所述的方法，其中，所述图片的部分包括：输出所述视频时其外部样点可丢弃的一致性窗口，或样点进行重采样操作的缩放窗口，或整个所述图片。4.根据权利要求1至3中任一权利要求所述的方法，其中所述编解码工具包括：解码器侧运动矢量细化编解码工具、双向光流编解码工具、使用光流的预测细化(PROF)编解码工具、或用于运动补偿的具有半像素精度的插值滤波器。5.根据权利要求4所述的方法，其中所述编解码工具还包括：时域运动矢量预测编解码工具、多变换集编解码工具、跨分量自适应环路滤波编解码工具、几何分割编解码工具、用于将块划分成多个分割的编解码工具的混合处理、需要在与所述当前图片不同的图片中存储的信息的编解码工具、生成成对Merge候选的编解码工具，具有编解码单元级权重的双向预测、加权预测编解码工具、仿射预测编解码工具、或自适应运动矢量分辨率编解码工具。6.根据权利要求1至5中任一权利要求所述的方法，其中，当指定所述多个参考图片中的至少一个图片的所述部分中的维度不同于所述当前图片的维度的条件满足时，禁用所述编解码工具。7.根据权利要求1至6中任一权利要求所述的方法，其中针对所述确定修改所述部分的维度。8.根据权利要求1至7中任一权利要求所述的方法，其中所述编解码工具的所述使用基于以下至少之一：(1)所述图片的宽度减去一个或多个水平偏移，或(2)所述图片的高度减去一个或多个垂直偏移。9.根据权利要求8所述的方法，其中所述一个或多个水平偏移包括用于缩放窗口的左偏移。10.根据权利要求8所述的方法，其中所述一个或多个垂直偏移包括用于缩放窗口的顶部偏移。11.根据权利要求8所述的方法，其中所述一个或多个水平偏移包括用于缩放窗口的右偏移和左偏移。12.根据权利要求8所述的方法，其中所述一个或多个垂直偏移包括用于缩放窗口的底部偏移和顶部偏移。13.根据权利要求8所述的方法，其中所述一个或多个水平偏移包括基于对缩放窗口的右偏移和左偏移之和进行缩放的值。14.根据权利要求8所述的方法，其中所述一个或多个垂直偏移包括基于对缩放窗口的底部偏移和顶部偏移之和进行缩放的值。15.根据权利要求1至5中任一权利要求所述的方法，其中，在指定所述多个参考图片中的至少两个图片的部分的维度不同的所述条件满足的情况下，禁用所述编解码工具。16.根据权利要求1至5中任一权利要求所述的方法，其中，在用于导出用于一个或两个
参考图片列表的第一成对Merge候选的所述多个参考图片中的至少两个图片的部分的维度不同的情况下，所述第一成对Merge候选被标记为不可用。17.根据权利要求1至16中任一权利要求所述的方法，其中指示所述编解码工具的使用的语法元素基于所述部分的维度在所述比特流表示中被有条件地信令通知。18.根据权利要求17所述的方法，其中在所述比特流表示中省略指示所述编解码工具的使用的语法元素。19.根据权利要...

【专利技术属性】
技术研发人员：张凯，张莉，刘鸿彬，
申请(专利权)人：字节跳动有限公司，
类型：发明
国别省市：