视频编解码中的几何分割模式制造技术

视觉媒体处理的方法，包括：为视觉媒体数据的当前视频块与视觉媒体数据的比特流表示之间的转换，基于规则确定分割模式编解码工具对转换被禁用，规则取决于当前视频块的维度；以及基于确定进行转换。以及基于确定进行转换。以及基于确定进行转换。

【技术实现步骤摘要】
【国外来华专利技术】视频编解码中的几何分割模式
[0001]相关申请的交叉引用
[0002]在适用专利法和/或遵循巴黎公约的规则下，本申请及时要求2019年9月28日提交的国际专利申请No.PCT/CN2019/108797的优先权和权益。出于法律下的全部目的，前述申请的整个公开通过引用并入作为本申请的公开的一部分。


[0003]本文档涉及视频和图像编码和解码技术。

技术介绍

[0004]数字视频占据互联网和其他数字通信网络上的最大带宽使用。随着连接的能够接收和显示视频的用户装置的数目增大，预期数字视频使用的带宽需求将持续增长。

技术实现思路

[0005]所公开技术可以由视频或图像解码器或编码器实施例用于使用诸如三角形分割模式的非矩形分割来进行视频比特流的编码或解码。
[0006]在一个示例性方面中，公开了视频处理的方法。方法包含，为视觉媒体数据的当前视频块与视觉媒体数据的比特流表示之间的转换，基于规则确定分割模式编解码工具对转换被禁用，规则取决于当前视频块的维度；以及基于确定进行转换。
[0007]在另一示例性方面中，公开了视频处理的方法。方法包含，为视觉媒体数据的当前视频块与视觉媒体数据的比特流表示之间的转换，基于规则确定使用光细化的预测(PROF)编解码工具的可应用性，在使用光细化的预测编解码工具中，当前视频块的预测被使用光流模型细化；以及根据确定进行转换，其中规则基于至少三个因素，包含：(1)当前视频块位于其中的条带的条带类型，(2)解码器侧运动矢量细化(DMVR)编解码工具是否对当前视频块启用，和/或(3)双向光流(BDOF)编解码工具是否对当前视频块启用。
[0008]在另一示例性方面中，公开了视频处理的方法。方法包含：进行视觉媒体数据的第一视频单元与视觉媒体数据的比特流表示之间的转换，其中根据格式规则配置比特流表示，格式规则指定，对第一视频单元在比特流表示中在指示组合帧间帧内预测(CIIP)编解码工具的使用的第二语法元素之前信令通知指示分割模式编解码工具的使用的第一语法元素，并且其中，在组合帧间帧内预测(CIIP)模式中，视频单元的最终预测基于视频单元的帧间预测和视频单元的帧内预测的加权和。
[0009]在另一示例性方面中，上述方法可以由包括处理器的视频解码器设备实现。
[0010]在另一示例性方面中，上述方法可以由包括处理器的视频编码器设备实现。
[0011]在又一示例性方面中，这些方法可以实施为处理器可执行指令的形式并储存在计算机可读程序介质上。
[0012]在又一示例性方面中，这些方法可以实施为储存在计算机可读储存介质中的比特流表示的形式。
[0013]本文档中进一步描述了这些和其他方面。
附图说明
[0014]图1示出了Merge候选列表构建的推导过程。
[0015]图2示出了空域Merge候选的位置的示例。
[0016]图3示出了对空域Merge候选的冗余检查考虑的候选对的示例。
[0017]图4示出了N
×
2N和2N
×
N分割的第二PU的示例性位置。
[0018]图5示出了时域Merge候选的运动矢量缩放的图示的示例。
[0019]图6示出了时域Merge候选的候选位置的示例，C0和C1。
[0020]图7示出了组合双向预测Merge候选的示例。
[0021]图8示出了运动矢量预测候选的推导过程的示例。
[0022]图9示出了空域运动矢量候选的运动矢量缩放的示例性图示。
[0023]图10示出了4参数仿射模式(左)和6参数仿射模型(右)的示例性简化仿射运动模型。
[0024]图11示出了每个子块的仿射运动矢量场的示例。
[0025]图12示出了仿射Merge模式的示例性候选位置。
[0026]图13示出了修改Merge列表构建过程的示例。
[0027]图14示出了基于三角分割的帧间预测的示例。
[0028]图15示出了应用第1加权因数组的CU的示例。
[0029]图16示出了运动矢量储存的示例。
[0030]图17示出了最终运动矢量表达(UMVE)搜索过程的示例。
[0031]图18示出了UMVE搜索点的示例。
[0032]图19示出了在DMVR中的列表0与列表1之间镜像的MVD(0，1)的示例。
[0033]图20示出了可以在一次迭代中检查的MV。
[0034]图21是帧内块复制的示例。
[0035]图22是视频处理设备的示例的框图。
[0036]图23是视频处理方法的示例的流程图。
[0037]图24示出了共享Merge区域(SMR，具有16x4尺寸)和SMR下的3个CU的示例。
[0038]图25是可以实现所公开技术的示例性视频处理系统的框图。
[0039]图26示出了光流轨迹的示例。
[0040]图27A
‑
27B示出了没有块扩展的BIO的示例。
[0041]图28示出了BIO中所使用的插值样点的示例。
[0042]图29示出了子块MV VSB和像素Δv(i,j)的示例。
[0043]图30示出了JVET
‑
P0068中的提案和VTM
‑
6.0中的TPM设计的示例。
[0044]图31示出了GEO划分边界描述。
[0045]图32示出了几何Merge模式的角度量化的示例。
[0046]图33示出了VTM
‑
5.0中的Merge模式的信令通知。
[0047]图34示出了提议的Merge模式的信令通知方法的示例。
[0048]图35是可以实现所公开技术的示例性视频处理系统的框图。
[0049]图36是图示了示例性视频编解码系统的框图。
[0050]图37是图示了根据本公开的一些实施例的编码器的框图。
[0051]图38是图示了根据本公开的一些实施例的解码器的框图。
[0052]图39是视觉媒体处理方法的示例的流程图。
[0053]图40是视觉媒体处理方法的示例的流程图。
[0054]图41是视觉媒体处理方法的示例的流程图。
具体实施方式
[0055]本文档提供可以由图像或视频比特流的解码器使用的各种技术，以改善压缩或编码的数字视频或图像的质量。出于简要，本文中使用术语“视频”来包含图片的序列(传统地称为视频)和单独的图像两者。另外，视频编码器还可以在编码的过程期间实现这些技术，以便重构用于进一步编码的解码帧。
[0056]在本文档中使用章节标题以易于理解，并且不将实施例和技术限制到对应的章节。因此，来自一个章节的实施例可以与来自其他章节的实施例组合。
[0057]1.简要概括
[0058]本文档涉及视频编解码技术。具体地，其涉及包含三角形预测模式的Merge编解码。其可本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种视觉媒体处理的方法，包括：为视觉媒体数据的当前视频块与所述视觉媒体数据的比特流表示之间的转换，基于规则确定分割模式编解码工具对所述转换被禁用，所述规则取决于所述当前视频块的维度；以及基于所述确定进行所述转换。2.根据权利要求1所述的方法，其中如果块宽度大于或等于阈值K0和/或块高度大于或等于阈值K1，则所述分割模式编解码工具被禁用。3.根据权利要求1所述的方法，其中如果块宽度大于阈值K0和/或块高度大于阈值K1，则所述分割模式编解码工具被禁用。4.根据权利要求2
‑
3中任意一项或多项所述的方法，其中所述阈值K0和所述阈值K1等于32。5.根据权利要求1所述的方法，其中如果块宽度小于或等于阈值K0和/或块高度大于或等于阈值K1，则所述分割模式编解码工具被禁用。6.根据权利要求1所述的方法，其中如果块宽度小于阈值K0和/或块高度大于阈值K1，则所述分割模式编解码工具被禁用。7.根据权利要求5
‑
6中任意一项或多项所述的方法，其中所述阈值K0和所述阈值K1等于8。8.根据权利要求1所述的方法，其中如果块高度和块宽度的乘积大于或等于阈值K1，则所述分割模式编解码工具被禁用。9.根据权利要求1所述的方法，其中如果块高度和块宽度的乘积大于阈值K1，则所述分割模式编解码工具被禁用。10.根据权利要求1所述的方法，其中如果块高度和块宽度的乘积小于或等于阈值K1，则所述分割模式编解码工具被禁用。11.根据权利要求1所述的方法，其中如果块高度和块宽度的乘积小于阈值K1，则所述分割模式编解码工具被禁用。12.根据权利要求8
‑
11中任意一项或多项所述的方法，其中所述阈值K1等于1024。13.根据权利要求1所述的方法，其中如果块宽度等于阈值K0和/或块高度等于阈值K1，则所述分割模式编解码工具被禁用。14.根据权利要求13所述的方法，其中K0＝8，K1＝32。15.根据权利要求1
‑
14中任意一项或多项所述的方法，其中所述规则还指定，指示所述分割模式编解码工具的应用是否被禁用的语法元素在所述比特流表示中被选择性地排除。16.根据权利要求1
‑
14中任意一项或多项所述的方法，其中所述规则还指定，在禁用所述分割模式编解码工具的应用的特定条件发生的情况下，则指示组合帧间帧内预测(CIIP)模式的应用的语法元素在所述比特流表示中被排除。17.根据权利要求16所述的方法，其中如果块宽度大于阈值K0和/或块高度大于阈值K1，则指示所述CIIP模式的应用的语法元素在所述比特流表示中被排除。18.根据权利要求17所述的方法，其中，在指示所述CIIP模式的应用的语法元素在所述比特流表示中被选择性地排除的情况下，所述CIIP模式被推断为启用。19.根据权利要求1
‑
14中任意一项或多项所述的方法，其中所述规则还指定，在禁用所
述分割模式编解码工具的应用的特定条件发生的情况下，则指示常规Merge模式的应用的语法元素在所述比特流表示中被排除。20.根据权利要求19所述的方法，其中如果块宽度大于阈值K0和/或块高度大于阈值K1，则指示所述常规Merge模式的应用的语法元素在所述比特流表示中被排除。21.根据权利要求1
‑
20中任意一项或多项所述的方法，其中所述分割模式编解码工具使用作为所述当前视频块的分割的加权平均的所述当前视频块的最终预测块，其中至少一个分割包括成角度边缘。22.根据权利要求21所述的方法，其中所述分割模式编解码工具对应于几何分割模式编解码工具。23.根据权利要求22所述的方法，其中所述几何分割模式编解码工具包含多个划分模式，其中至少一个划分模式将所述当前视频块划分为两个分割，所述两个分割中的至少一个是非正方形且非矩形的。24.根据权利要求21所述的方法，其中所述分割模式编解码工具对应于三角形分割模式(TPM)编解码工具。25.一种视觉媒体处理的方法，包括：为视觉媒体数据的当前视频块与所述视觉媒体数据的比特流表示之间的转换，基于规则确定使用光细化的预测(PROF)编解码工具的可应用性，在所述使用光细化的预测编解码工具中，使用光流模型细化所述当前视频块的预测；以及根据所述确定进行所述转换，其中所述规则基于至少三个因素，包含：(1)所述当前视频块位于其中的条带的条带类型，(2)解码器侧运动矢量细化(DMVR)编解码工具是否对所述当前视频块启用，和/或(3)双向光流(BDOF)编解码工具是否对所述当前视频块启用。26.根据权利要求25所述的方法，其中所述规则指定，所述条带类型排他地是B条带。27.根据权利要求25
‑
26中任意一项或多项所述的方法，其中所述规则指定，在所述DMVR工具和所述BDOF编解码工具被禁用的情况下，所述PROF编解码...

【专利技术属性】
技术研发人员：张莉，张凯，刘鸿彬，王悦，
申请(专利权)人：字节跳动有限公司，
类型：发明
国别省市：