非二元块上的帧内预测制造技术

公开了一种由视频编解码装置实现的处理视频数据的机制

【技术实现步骤摘要】
【国外来华专利技术】非二元块上的帧内预测
[0001]相关申请的交叉引用
[0002]本专利申请要求北京字节跳动网络技术有限公司于
2021
年3月
30
日提交的
、
以及名称为“非二元块上的帧内预测”的国际申请
No.PCT/CN2021/083904
的权益，其通过引用并入本文
。


[0003]本专利文档涉及文件格式的数字音频视频媒体信息的生成
、
存储和消耗
。

技术介绍

[0004]数字视频占互联网和其他数字通信网络上最大的带宽使用
。
随着能够接收和显示视频的连接用户设备数量的增加，数字视频使用的带宽需求可能继续增长
。

技术实现思路

[0005]第一方面涉及一种由视频编解码装置实现的用于处理视频数据的方法，包括：确定块是二元的还是非二元的；当块被确定是二元的时，启用与帧内预测相关联的编解码工具；当块被确定是非二元的时，禁用编解码工具；以及通过对块应用帧内预测来执行可视媒体数据和比特流之间的转换
[0006]可选地，在前述方面的任一方面中，该方面的另一实现方式提供编解码工具是多参考线
(MRL)、
基于矩阵的帧内预测
(MIP)、
帧内子分割
(ISP)、
跨分量线性模型
(CCLM)、CCLM
左
(LML)、CCLM
上
(LMA)、
位置相关帧内预测组合
(PDPC)、
解码侧模式导出
(DIMD)
或其组合
。
[0007]可选地，在前述方面的任一方面中，该方面的另一实现方式提供当块被确定是二元的时，与编解码工具相关联的语法元素被包括在比特流中，并且其中当块被确定是非二元的时，与编解码工具相关联的语法元素不被包括在比特流中
。
[0008]可选地，在前述方面的任一方面中，该方面的另一实现方式提供块具有宽度
(W)
和高度
(H)
，其中，当块被确定是非二元的时，根据基于减小的宽度
(W1)
或减小的高度
(H1)
确定的直流
(DC)
预测值对块进行编解码，其中，
W1
小于
W
，并且
H1
小于
H。
[0009]可选地，在前述方面的任一方面中，该方面的另一实现方式提供当块被确定是非二元的时，根据基于空域上连续邻近样点的二元数量确定的
DC
预测值对块进行编解码，并且其中，块具有非二元数量的邻近样点，并且空域上连续邻近样点的二元数量小于邻近样点的非二元数量
。
[0010]可选地，在前述方面的任一方面中，该方面的另一实现方式提供空域上连续邻近样点中的第一个位于块的左顶角
。
[0011]可选地，在前述方面的任一方面中，该方面的另一实现方式提供空域上连续邻近样点中的第一个不位于块的左顶角
。
[0012]可选地，在前述方面的任一方面中，该方面的另一实现方式提供当块被确定是非二元的时，根据基于空域非连续邻近样点的二元数量确定的
DC
预测值对块进行编解码
。
[0013]可选地，在前述方面的任一方面中，该方面的另一实现方式提供块具有高度
(H)
和宽度
(W)
，其中当块被确定是非二元的时，块根据以下进行编解码：
[0014][0015][0016][0017]N
＝
W'+H'
[0018]其中
D
是
DC
预测值，
offset
是整数值，
S
表示对应位置处的样点值，
k
是样点索引，
xCurr
是块的左顶样点的水平坐标，
yCurr
是块的左顶样点的垂直坐标，
RefLy
表示参考线行，
RefLx
表示参考线列，
W
’
是与块相关联的宽度，并且
H
’
是与块相关联的高度，其中
H
’
是小于
H
的二元高度或者
W
’
是小于
W
的二元宽度
。
[0019]可选地，在前述方面的任一方面中，该方面的另一实现方式提供当块被确定是非二元的时，根据基于根据步长函数选择的邻近样点的二元数量确定的
DC
预测值对块进行编解码
。
[0020]可选地，在前述方面的任一方面中，该方面的另一实现方式提供当块被确定是非二元的时，根据基于上邻近样点的二元数量和左邻近样点的二元数量确定的
DC
预测值对块进行编解码
。
[0021]可选地，在前述方面的任一方面中，该方面的另一实现方式提供比特流包括指示用于对块进行编解码的广角帧内预测码字，其中当块是二元的时，码字指示信令通知的广角帧内预测
(sigpredMode)
，并且其中，当块是非二元的时，码字指示最终广角帧内预测
(finalpredMode)。
[0022]可选地，在前述方面的任一方面中，该方面的另一实现方式提供
finalpredMode
是
sigpredMode、
块的宽度
(W)
和块的高度
(H)
的函数
。
[0023]可选地，在前述方面的任一方面中，该方面的另一实现方式提供当
W
大于
H
并且
sigpredMode
小于阈值模式
(ThresMode)
时，
finalpredMode
等于
sigpredMode
加上整数值
。
[0024]可选地，在前述方面的任一方面中，该方面的另一实现方式提供当
W
小于
H
并且
sigpredMode
大于阈值模式
(ThresMode)
时，
finalpredMode
等于
sigpredMode
加上整数值
。
[0025]可选地，在前述方面的任一方面中，该方面的另一实现方式提供
ThresMode
是等于的角度
、
等于等于的角度
、
模式差的函数
(modeDiff)、
和的函数
、
和的函数或其组合
。
[0026]可选地，在前述方面的任一方面中，该方面的另一实现方式提供根据
ISP
对块进行编解码，并且其中当块是非二元的时本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.
一种由视频编解码装置实现的处理视频数据的方法，包括：确定块是二元的还是非二元的；当所述块被确定是二元的时，启用与帧内预测相关联的编解码工具；当所述块被确定是非二元的时，禁用所述编解码工具；以及通过对所述块应用帧内预测来执行可视媒体数据和比特流之间的转换
。2.
根据权利要求1所述的方法，其中，所述编解码工具是多参考线
MRL、
基于矩阵的帧内预测
MIP、
帧内子分割
ISP、
跨分量线性模型
CCLM、CCLM
左
LML、CCLM
上
LMA、
位置相关帧内预测组合
PDPC、
解码侧模式导出
DIMD
或其组合
。3.
根据权利要求1‑2中任一项所述的方法，其中，当所述块被确定是二元的时，与所述编解码工具相关联的语法元素被包括在所述比特流中，并且其中当所述块被确定是非二元的时，与所述编解码工具相关联的所述语法元素不被包括在所述比特流中
。4.
根据权利要求1‑3中任一项所述的方法，其中，所述块具有宽度
W
和高度
H
，其中，当所述块被确定是非二元的时，根据基于减小的宽度
W1
或减小的高度
H1
确定的直流
DC
预测值对所述块进行编解码，其中，
W1
小于
W
，并且
H1
小于
H。5.
根据权利要求1‑4中任一项所述的方法，其中，当所述块被确定是非二元的时，根据基于空域上连续邻近样点的二元数量确定的
DC
预测值对所述块进行编解码，并且其中，所述块具有非二元数量的邻近样点，并且所述空域上连续邻近样点的二元数量不等于邻近样点的非二元数量
。6.
根据权利要求1‑5中任一项所述的方法，其中，所述空域上连续邻近样点中的第一个位于所述块的左顶角
。7.
根据权利要求1‑6中任一项所述的方法，其中，所述空域上连续邻近样点中的第一个不位于所述块的左顶角
。8.
根据权利要求1‑7中任一项所述的方法，其中，当所述块被确定是非二元的时，根据基于空域非连续邻近样点的二元数量确定的
DC
预测值对所述块进行编解码
。9.
根据权利要求1‑8中任一项所述的方法，其中，所述块具有高度
H
和宽度
W
，其中当所述块被确定是非二元的时，所述块根据以下进行编解码：述块被确定是非二元的时，所述块根据以下进行编解码：述块被确定是非二元的时，所述块根据以下进行编解码：以及
N
＝
W
’
+H
’
其中，
D
是
DC
预测值，
offset
是整数值，
S
表示对应位置处的样点值，
k
是样点索引，
xCurr
是所述块的左顶样点的水平坐标，
yCurr
是所述块的左顶样点的垂直坐标，
RefLy
表示参考线行，
RefLx
表示参考线列，
W
’
是与所述块相关联的宽度，并且
H
’
是与所述块相关联的高度，其中
H
’
是小于
H
的二元高度或者
W
’
是小于
W
的二元宽度
。10.
根据权利要求1‑9中任一项所述的方法，其中，当所述块被确定是非二元的时，根据
基于根据步长函数选择的邻近样点的二元数量确定的
DC
预测值对所述块进行编解码
。11.
根据权利要求1‑
10
中任一项所述的方法，其中，当所述块被确定是非二元的时，根据基于上邻近样点的二元数量和左邻近样点的二元数量确定的
DC
预测值对所述块进行编解码
。12.
根据权利要求1‑
11
中任一项所述的方法，其中，所述比特流包括指示用于对所述块进行编解码的广角帧内预测的码字，并且其中所述码字指示信令通知的帧内预测
sigpredMode
，当所述块是非二元的时，所述帧内预测可以被转换成最终的广角帧内预测
finalpredMode。13.
根据权利要求1‑
12
中任一项所述的方法，其中，所述
finalpredMode
是
sigpredMode、
所述块的宽度
W
和所述块的高度
H
的函数
。14.
根据权利要求1‑
13
中任一项所述的方法，其中，当
W
大于
H
并且
sigpredMode
小于阈值模式
ThresMode
时，所述
finalpredMode
等于
sigpredMode
加上整数值
。15.
根据权利要求1‑
14
中任一项所述的方法，其中，当
W
小于
H
并且
sigpredMode
大于阈值模式
ThresMode
时，所述
finalpredMode
等于
sigpredMode
加上整数值
。16.
根据权利要求1‑
15
中任一项所述的方法，其中，所述
ThresMode
是等于的角度
、
等于的角度
、
模式差的函数
modeDiff、
和的函数
、
和的函数或其组合
。17.
根据权利要求1‑
16
中任一项所述的方法，其中，根据
ISP
对所述块进行编解码，并且其中当所述块是非二元的时，所述块被划分为奇数个子分割
、
被划分为多于四个子分割
、
被划分为沿着非二元方向具有不同维度的子分割
、
被划分为是预定整数值的倍数的多个子分割
、
或其组合
。18.
根据权利要求1‑
17
中任一项所述的方法，其中，当所述块是非二元的时，在应用矩阵之前，通过将所述非二元块划分为多个二元子块，根据
MIP
对所述块进行编解码
。19.
根据权利要求1‑
18
中任一项所述的方法，其中，通过当所述块的高度
H
是非二元的时获得左邻近样点的二元数量，以及当所述块的宽度
W
是非二元的时获得上邻近样点的二元数量，根据不可用邻近样点的替换对所述块进行编解码
。20.
根据权利要求1‑
19
中任一项所述的方法，其中，当所述块是非二元的时，通过当所述块的高度
H
是非二元的时获得左邻近样点的二元数量，以及当所述块的宽度
W
是非二元的时获得上邻近样点的二元数量，根据
CCLM
对所述块进行编解码
。21.
根据权利要求1‑
20
中任一项所述的方法，其中，当所述块被确定是非二元的时，根据根据除法运算确定的平面帧内预测模式值对所述块进行编解码，所述除法运算具有基于所述块的宽度
W
和所述块的高度
H
的除数
。22.
根据...

【专利技术属性】
技术研发人员：张凯，张莉，邓智玭，张娜，王洋，
申请(专利权)人：字节跳动有限公司，
类型：发明
国别省市：