在视频解码器处进行视频解码的方法中，接收第一高级语法(HLS)元素和第二HLS元素。所述第一HLS元素指示对帧内编码块启用还是禁用显式多变换选择(MTS)。所述第二HLS元素指示对帧间编码块启用还是禁用所述显式MTS。所述第一HLS元素和所述第二HLS元素控制同一组编码块，所述同一组编码块包括所述帧内编码块和所述帧间编码块。当所述第一HLS元素指示对所述帧内编码块禁用所述显式MTS，并且所述第二HLS元素指示对所述帧间编码块启用所述显式MTS时，对所述帧内编码块启用隐式MTS。对所述帧内编码块启用隐式MTS。对所述帧内编码块启用隐式MTS。
【技术实现步骤摘要】
【国外来华专利技术】视频编解码的方法和装置
[0001]通过引用并入本文
[0002]本申请要求于2020年5月19日提交的、申请号为16/878,390、名称为“视频编解码的方法和装置”的美国专利申请的优先权，其要求于2019年6月11日提交的、申请号为62/860,149、名称为“启用隐式变换选择的高级语法控制”的美国临时申请的优先权。在先申请的公开内容通过引用整体并入本文。
[0003]本公开描述总体上涉及视频编解码的实施例。
技术介绍
[0004]本文所提供的背景描述旨在总体上呈现本公开的背景。在
技术介绍
部分以及本说明书的各个方面中所描述的目前已署名的专利技术人的工作所进行的程度，并不表明其在本公开提交时作为现有技术，且从未明示或暗示其被承认为本公开的现有技术。
[0005]可以使用具有运动补偿的图片间预测来执行视频编码和解码。未压缩的数字视频可以包括一系列图片，每个图片具有例如1920
×
1080亮度样本及相关色度样本的空间维度。所述系列图片可以具有固定的或可变的图片速率(也非正式地称为帧率)，例如每秒60张图片或60Hz。未压缩的视频具有很高的比特率要求。例如，每个样本8比特的1080p60 4:2:0视频(60Hz帧率下1920x1080亮度样本分辨率)要求接近1.5Gbit/s带宽。一小时这样的视频就需要超过600GB的存储空间。
[0006]视频编码和解码的一个目的是通过压缩减少输入视频信号的冗余。压缩可以帮助降低对上述带宽或存储空间的要求，在某些情况下可降低两个或更多数量级。无损压缩和有损压缩、以及两者的组合均可采用。无损压缩是指从压缩的原始信号中重建原始信号精确副本的技术。当使用有损压缩时，重建信号可能与原始信号不完全相同，但是原始信号和重建信号之间的失真足够小，使得重建信号可用于预期应用。有损压缩广泛应用于视频。容许的失真量取决于应用。例如，相比于电视应用的用户，某些消费流媒体应用的用户可以容忍更高的失真。可实现的压缩比反映出：较高的允许/容许失真可产生较高的压缩比。
[0007]视频编码器和解码器可以利用几大类技术，例如包括：运动补偿、变换、量化和熵编码。
[0008]视频编解码器技术可以包括已知的帧内编解码技术。在帧内编解码中，在不参考先前重建的参考图片的样本或其它数据的情况下表示样本值。在一些视频编解码器中，图片在空间上被细分为样本块。当所有的样本块都以帧内模式编解码时，该图片可以为帧内图片。帧内图片及其衍生(例如独立解码器刷新图片)可用于复位解码器状态，并且因此可用作已编码视频比特流和视频会话中的第一图片，或用作静止图像。帧内块的样本可用于变换，并且可以在熵编码之前量化变换系数。帧内预测可以是一种使预变换域中的样本值最小化的技术。在某些情况下，变换后的DC值越小，且AC系数越小，则在给定的量化步长尺寸下表示熵编码后的块所需的比特越少。
[0009]如同从诸如MPEG
‑
2编解码技术中所获知的，传统帧内编解码不使用帧内预测。然而，一些较新的视频压缩技术包括：试图从例如周围样本数据和/或元数据中得到数据块的技术，其中周围样本数据和/或元数据是在空间相邻块的编码/解码期间、且在解码顺序之前获得的。这种技术后来被称为"帧内预测"技术。需要注意的是，至少在某些情形下，帧内预测仅使用正在重建的当前图片的参考数据，而不使用参考图片的参考数据。
[0010]可以存在许多不同形式的帧内预测。当在给定的视频编解码技术中可以使用超过一种这样的技术时，所使用的技术可以按帧内预测模式进行编解码。在某些情形下，模式可以具有子模式和/或参数，且这些模式可以单独编解码或包含在模式码字中。给定模式/子模式/参数组合使用哪个码字会影响通过帧内预测获得的编解码效率增益，因此用于将码字转换成比特流的熵编码技术也会出现这种情况。
[0011]H.264引入了一种帧内预测模式，其在H.265中进行了改进，且在诸如联合开发模型(JEM)、通用视频编解码(VVC)、基准集合(BMS)等更新的编解码技术中进一步被改进。使用属于已经可用的样本的相邻样本值可以形成预测块。将相邻样本的样本值按照某一方向复制到预测块中。对所使用方向的引用可以被编码在比特流中，或者本身可以被预测。
[0012]运动补偿可以是一种有损压缩技术，且可涉及如下技术：来自先前重建的图片或重建图片一部分(参考图片)的样本数据块在空间上按运动矢量(下文称为MV)指示的方向移位后，用于新重建的图片或图片部分的预测。在某些情况下，参考图片可与当前正在重建的图片相同。MV可具有两个维度X和Y，或者三个维度，其中第三个维度表示正在使用的参考图片(后者间接地可以是时间维度)。
[0013]在一些视频压缩技术中，应用于样本数据的某个区域的MV可根据其它MV来预测，例如根据与正在重建的区域空间相邻的样本数据的另一个区域相关的、且按解码顺序在该MV前面的那些MV。这样做可以大大减少编解码MV所需的数据量，从而消除冗余并增加压缩量。MV预测可以有效地进行，例如，因为在对从相机导出的输入视频信号(称为自然视频)进行编解码时，存在一种统计上的可能性，即面积大于单个MV适用区域的区域，会朝着类似的方向移动，因此，在某些情况下，可以使用从相邻区域的MV导出的相似运动矢量进行预测。这导致针对给定区域发现的MV与根据周围MV预测的MV相似或相同，并且在熵编解码之后，又可以用比直接编解码MV时使用的比特数更少的比特数来表示。在某些情况下，MV预测可以是对从原始信号(即样本流)导出的信号(即MV)进行无损压缩的示例。在其它情况下，例如由于根据几个周围MV计算预测值时产生的取整误差，MV预测本身可能是有损的。
[0014]H.265/HEVC(ITU
‑
T H.265建议书，“高效视频编解码”，2016年12月)描述了各种MV预测机制。在H.265提供的多种MV预测机制中，本公开描述的是下文称为“空间合并”的技术。
[0015]参照图1，当前块(101)包括编码器在运动搜索过程中发现的样本，所述样本可以根据已在空间上移位的相同大小的先前块进行预测。不直接对MV进行编解码，而是使用与五个周围样本中的任何一个相关联的MV，从与一个或多个参考图片相关联的元数据中导出该MV，例如，从最近的(按解码顺序)参考图片中导出该MV。其中，五个周围样本分别用A0、A1和B0、B1、B2(分别为102到106)表示。在H.265中，MV预测可使用相邻块正在使用的同一参考图片的预测值。
技术实现思路
[0016]本公开的各方面提供了一种在视频解码器处进行视频解码的第一方法。所述方法可以包括：接收第一高级语法(HLS)元素，所述第一HLS元素指示对帧内编码块启用还是禁用显式多变换选择(MTS)；接收第二HLS元素，所述第二HLS元素指示对帧间编码块启用还是禁用所述显式MTS。所述第一HLS元素和所述第二HLS元素控制同一组编码块，所述同一组编码块包括所述帧内编码块和所述帧间编码块。当所述第一HLS元素指示对所述帧内本文档来自技高网...
【技术保护点】
【技术特征摘要】
【国外来华专利技术】1.一种在视频解码器处进行视频解码的方法，其特征在于，包括：接收第一高级语法HLS元素，所述第一HLS元素指示对帧内编码块启用还是禁用显式多变换选择MTS；接收第二HLS元素，所述第二HLS元素指示对帧间编码块启用还是禁用所述显式MTS，其中所述第一HLS元素和所述第二HLS元素控制同一组编码块，所述同一组编码块包括所述帧内编码块和所述帧间编码块；以及当所述第一HLS元素指示对所述帧内编码块禁用所述显式MTS，并且所述第二HLS元素指示对所述帧间编码块启用所述显式MTS时，对所述帧内编码块启用隐式MTS。2.根据权利要求1所述的方法，其特征在于，进一步包括：将所述隐式MTS应用于所述帧内编码块，其中用于处理所述帧内编码块的变换类型根据所述帧内编码块的大小来确定。3.根据权利要求1所述的方法，其特征在于，所述第一HLS元素或所述第二HLS元素为以下之一：视频参数集VPS语法元素，序列参数集SPS语法元素，图片参数集PPS语法元素，切片头语法元素，图块头语法元素，或图块组头语法元素。4.根据权利要求1所述的方法，其特征在于，所述帧内编码块不使用帧内子分区ISP模式进行编码。5.根据权利要求1所述的方法，其特征在于，进一步包括：接收第三HLS元素，所述第三HLS元素指示对所述帧间编码块和所述帧内编码块中的每一个启用MTS。6.一种在视频解码器处进行视频解码的方法，其特征在于，包括：接收第一高级语法HLS元素，所述第一HLS元素指示对帧内编码块启用还是禁用显式多变换选择MTS；接收第二HLS元素，所述第二HLS元素指示对所述帧内编码块禁用还是启用不可分离二次变换NSST或基于矩阵的帧内预测MIP；以及当所述第一HLS元素指示对所述帧内编码块禁用所述显式MTS，并且所述第二HLS元素指示对所述帧内编码块禁用所述NSST或所述MIP时，对所述帧内编码块启用隐式MTS。7.根据权利要求6所述的方法，其特征在于，进一步包括：当所述第一HLS元素指示对所述帧内编码块禁用所述显式MTS，并且所述第二HLS元素指示对所述帧内编码块启用所述NSST或所述MIP时，对所述帧内编码块禁用所述隐式MTS。8.根据权利要求6所述的方法，其特征在于，所述启用包括：当所述第一HLS元素指示对所述帧内编码块禁用所述显式MTS，并且如HLS元素所指示的，对所述帧内编码块禁用所述NSST和所述MIP时，对所述帧内编码块启用所述隐式MTS。9.根据权利要求6所述的方法，其特征在于，进一步包括：将所述隐式MTS应用于所述...
【专利技术属性】
技术研发人员：刘杉，赵欣，李翔，
申请(专利权)人：腾讯美国有限责任公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。