用于视频编解码的去方块滤波器制造技术

在示例性方面，用于视觉媒体处理的方法包括：识别两个视频块的垂直边缘和/或水平边缘处的边界；基于使用组合的帧内帧间预测(CIIP)模式编码跨越垂直边缘或水平边缘的两个视频块中的至少一个，计算滤波器的边界强度；决定打开还是关闭所述滤波器；在打开所述滤波器的情况下选择所述滤波器的强度；以及基于所述选择，对所述视频块执行去方块滤波(DB)处理。对所述视频块执行去方块滤波(DB)处理。对所述视频块执行去方块滤波(DB)处理。

【技术实现步骤摘要】
【国外来华专利技术】用于视频编解码的去方块滤波器
[0001]相关申请的交叉引用
[0002]根据适用专利法和/或适用于巴黎公约的规则，本申请及时要求2019年5月11日提交的国际专利申请No.PCT/CN2019/086488号的优先权和权益。出于法律的所有目的，通过引用将上述申请的全部公开并入，作为本申请公开的一部分。


[0003]本专利文档涉及视频编码/解码技术、设备和系统。

技术介绍

[0004]尽管视频压缩有所进步，数字视频在互联网和其他数字通信网络上仍占最大的带宽使用量。随着能够接收和显示视频的连接用户设备的数量增加，预计数字视频使用所需的带宽将继续增长。

技术实现思路

[0005]描述了与视频编码/解码技术有关的设备、系统和方法，特别是与图像/视频编解码中的去方块滤波器有关的设备、系统和方法。所描述的方法可以应用于正在开发的标准(例如多功能视频编解码)和未来的视频编解码标准或视频编解码器。
[0006]在一个方面，所公开的技术可以用于提供用于视觉媒体处理的方法。该方法包括：识别两个视频块的垂直边缘和/或水平边缘处的边界；基于使用组合的帧内帧间预测(CIIP)模式编码的跨越垂直边缘或水平边缘的两个视频块中的至少一个，计算滤波器的边界强度；决定打开还是关闭所述滤波器；在打开所述滤波器的情况下选择所述滤波器的强度；以及基于所述选择，对所述视频块执行去方块滤波(DB)处理。
[0007]在另一方面，所公开的技术可以用于提供用于视觉媒体处理的方法。该方法包括：确定适用于视觉媒体数据的视频块和视频块的比特流表示之间的转换的编码方案；以及基于所述编码方案的确定，在所述视频块的转换期间，选择性地使能或禁止将环内滤波器应用于视频块。
[0008]在又一方面，所公开的技术可以用于提供用于视觉媒体处理的方法。该方法包括：确定适用于视觉媒体数据的视频块和视频块的比特流表示之间的转换的变换矩阵的类型；以及基于对变换矩阵的类型的确定，在所述视频块的转换期间，选择性地使能或禁止将去方块(DB)滤波处理应用于视频块。
[0009]在又一方面，所公开的技术可以用于提供用于视觉媒体处理的方法。该方法包括：在视觉媒体数据的视频块和视频块的比特流表示之间的转换期间，确定将环内滤波步骤应用于视频块，其中，环内滤波步骤包括应用于在要滤波的视频块中的样点上的裁剪操作；以及响应于确定与视频块相关联的一个或多个条件，选择性地启用或禁用裁剪操作。
[0010]在又一方面，上述方法以处理器可执行代码的形式体现，并存储在计算机可读程序介质中。
[0011]在又一方面，公开了一种配置或可操作以执行上述方法的设备。该设备可以包括被编程为实现该方法的处理器。
[0012]在又一方面，视频解码器装置可实现如本文中所描述的方法。
[0013]在又一方面，视频编码器装置可实现如本文中所描述的方法。
[0014]在附图、说明书和权利要求中更详细地描述了所公开技术的上述和其他方面和特征。
附图说明
[0015]图1示出了多功能视频编解码(VVC)的编码器框图的示例。
[0016]图2示出去方块滤波处理的示例处理流程。
[0017]图3示出了如何基于帧内编码模式、非零变换系数的存在和运动信息、参考图片、运动矢量的数量和运动矢量差来计算Bs值。
[0018]图4示出了用于在CTU边界处计算Bs的参考信息的示例。
[0019]图5示出了涉及滤波器开/关决策的像素的示例。
[0020]图6A示出了4
×
8和8
×
4块的划分的示例。
[0021]图6B示出了除4
×
8、8
×
4和4
×
4以外的所有块的划分的示例。
[0022]图7A示出了用于4
×
4块的仿射线性加权帧内预测(ALWIP)的示例。
[0023]图7B示出了用于8
×
8块的ALWIP的示例。
[0024]图7C示出了用于8
×
4块的ALWIP的示例。
[0025]图7D示出了用于16
×
16块的ALWIP的示例。
[0026]图8示出了JEM中的二次变换的示例。
[0027]图9示出了基于所公开技术的实施例的简化的二次变换(RST)的示例。
[0028]图10示出了子块变换模式SBT
‑
V和SBT
‑
H的示例。
[0029]图11示出了子块MV VSB和像素Δv(i,j)的示例。
[0030]图12示出了基于所公开技术的一些实施例的用于视频处理的示例方法的流程图。
[0031]图13示出了基于所公开技术的一些实施例的用于视频处理的示例方法的流程图。
[0032]图14示出了基于所公开技术的一些实施例的用于视频处理的示例方法的流程图。
[0033]图15示出了基于所公开技术的一些实施例的用于视频处理的示例方法的流程图。
[0034]图16示出了基于所公开技术的一些实施例的用于视频处理的示例方法的流程图。
[0035]图17示出了基于所公开技术的一些实施例的用于视频处理的示例方法的流程图。
[0036]图18示出了基于所公开技术的一些实施例的用于视频处理的示例方法的流程图。
[0037]图19示出了基于所公开技术的一些实施例的用于视频处理的示例方法的流程图。
[0038]图20是用于实现本文档中描述的视觉媒体解码或视觉媒体编码技术的硬件平台的示例的框图。
[0039]图21是其中可实施所公开的技术的示例视频处理系统的框图。
[0040]图22示出了用于视觉媒体处理的示例方法的流程图。
[0041]图23示出了用于视觉媒体处理的示例方法的流程图。
[0042]图24示出了用于视觉媒体处理的示例方法的流程图。
[0043]图25示出了用于视觉媒体处理的示例方法的流程图。
具体实施方式
[0044]由于对更高分辨率视频的需求的增加，在现代技术中普遍存在视频编解码方法和技术。视频编解码器通常包括压缩或解压缩数字视频的电子电路或软件，并且不断改进以提供更高的编码效率。视频编解码器将未压缩视频转换为压缩格式，反之亦然。视频质量、用于表示视频的数据量(由比特率确定)、编码和解码算法的复杂度、对数据丢失和错误的敏感性、编辑的简易性、随机访问和端到端延迟(迟延)之间存在复杂的关系。压缩格式通常符合标准视频压缩规范，例如，高效视频编解码(HEVC)标准(也称为H.265或MPEG
‑
H第2部分)、要完成的多功能视频编解码(Versatile Video Coding，VVC)标准、或其他当前和/或未来的视频编解码标准。
[0045]在一些实施例中，使用称为联合探索模型(JEM)的参考软件来探索未来的视频编解码技术。在JEM本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种用于视觉媒体处理的方法，包括：识别两个视频块的垂直边缘和/或水平边缘处的边界；基于使用组合的帧内帧间预测(CIIP)模式编解码的跨越垂直边缘或水平边缘的所述两个视频块中的至少一个，计算滤波器的边界强度；决定打开还是关闭所述滤波器；在打开所述滤波器的情况下选择所述滤波器的强度；以及基于所述选择，对所述视频块执行去方块滤波(DB)处理。2.根据权利要求1所述的方法，其中，在计算所述边界强度时，将CIIP编解码块视为帧内编解码块。3.根据权利要求1所述的方法，其中，在跨越垂直或水平边缘的两个视频块中的至少一个用CIIP编解码的情况下，将所述边界强度选择为2。4.根据权利要求1所述的方法，其中，在跨越垂直或水平边缘的两个块中的仅一个用CIIP编解码并且另一个视频块以帧间编解码的情况下，将所述边界强度选择为1。5.根据权利要求1所述的方法，其中，在跨越边缘的两个块中的仅一个用CIIP编解码并且另一视频块以帧间或帧内块复制(IBC)编解码的情况下，将所述边界强度选择为1。6.一种用于视觉媒体处理的方法，包括：确定适用于视觉媒体数据的视频块和所述视频块的比特流表示之间的转换的编解码方案；以及基于所述编解码方案的所述确定，在所述视频块的转换期间，选择性地使能或禁止将环内滤波器应用于所述视频块。7.根据权利要求6所述的方法，其中，所述环内滤波器包括以下之一：去方块滤波器(DB)、采样自适应偏移(SAO)滤波器和/或自适应环路滤波器(ALF)。8.根据权利要求6至7中任一项或多项所述的方法，其中，所述编解码方案包括使用光流来细化预测样点和/或运动信息和/或重构样点。9.根据权利要求8所述的方法，其中，使用所述光流来细化所述预测样点的所述编解码方案包括双向光流(BDOF)。10.根据权利要求9所述的方法，其中，所述编解码方案的所述确定包括：识别所述预测样点是否位于所述双向光流(BDOF)内；以及响应于确定所述预测样点位于所述双向光流(BDOF)内，禁止所述环内滤波器的所述应用。11.根据权利要求10所述的方法，其中，基于所述双向光流(BDOF)的使用来确定所述环内滤波器的边界强度和/或滤波器强度中的至少一个。12.根据权利要求9所述的方法，其中，所述编解码方案的所述确定包括：识别所述预测样点是否位于所述双向光流(BDOF)内，并且其中，响应于确定所述预测样点位于所述双向光流(BDOF)内，使能所述环内滤波器的所述应用，并且进一步，其中所述环内滤波器的强度比与未位于所述BDOF内的预测样点相关联的另一个环内滤波器的强度更弱。13.一种用于视觉媒体处理的方法，包括：确定适用于视觉媒体数据的视频块和所述视频块的比特流表示之间的转换的变换矩阵的类型；以及基于对所述变换矩阵的类型的所述确定，在所述视频块的转换期...

【专利技术属性】
技术研发人员：张莉，朱维佳，张凯，刘鸿彬，许继征，
申请(专利权)人：字节跳动有限公司，
类型：发明
国别省市：