用于可缩放视频译码的帧内预测改善制造技术

一种根据某些方面的用于译码视频信息的设备包含存储器单元及与所述存储器单元通信的处理器。所述存储器单元存储与参考层及对应增强层相关联的视频信息。所述处理器至少部分基于通过第一加权因子加权的帧内预测值及通过第二加权因子加权的在所述参考层中的共置视频单元的值而确定定位在所述增强层内的一位置处的视频单元的值，其中所述帧内预测值是基于所述增强层中的至少一个额外视频单元而确定，其中所述共置视频单元位于所述参考层中的对应于所述视频单元在所述增强层中的所述位置的位置。在一些实施例中，所述第一加权因子及所述第二加权因子中的至少一者在0与1之间。

【技术实现步骤摘要】
【国外来华专利技术】用于可缩放视频译码的帧内预测改善
本专利技术涉及视频译码。
技术介绍
数字视频能力可并入到广泛范围的装置中，包含数字电视、数字直播系统、无线广播系统、个人数字助理(PDA)、膝上型或桌上型计算机、平板计算机、电子图书阅读器、数码相机、数字记录装置、数字媒体播放器、视频游戏装置、视频游戏控制台、蜂窝式或卫星无线电电话、所谓的“智能电话”、视频电话会议装置、视频流式发射装置及其类似者。数字视频装置实施视频译码技术，例如由MPEG-2、MPEG-4、ITU-TH.263或ITU-TH.264/MPEG-4第10部分高级视频译码(AVC)所定义的标准、目前正在开发的高效率视频译码(HEVC)标准及这些标准的扩展中所描述的视频译码技术。视频装置可通过实施此类视频译码技术而更有效率地发射、接收、编码、解码及/或存储数字视频信息。视频译码技术包含空间(图片内)预测及/或时间(图片间)预测以减少或移除视频序列中固有的冗余。对于基于块的视频译码来说，视频切片(例如，视频帧或视频帧的一部分)可分割成视频块，视频块还可被称作树块、译码单元(CU)及/或译码节点。使用相对于图片中的相邻块中的参考样本的空间预测对同一图片的经帧内编码(I)切片中的视频块进行编码。图片的经帧间译码(P或B)切片中的视频块可使用相对于同一图片中的相邻块中的参考样本的空间预测或相对于其它参考图片中的参考样本的时间预测。图片可称作帧，且参考图片可称作参考帧。空间或时间预测导致待译码块的预测性块。残余数据表示待译码的原始块与预测性块之间的像素差。经帧间译码块是根据指向形成预测性块的参考样本块的运动向量及指示经译码块与预测性块之间的差的残余数据而编码。经帧内译码块是根据帧内译码模式及残余数据而编码。为了实现进一步压缩，可将残余数据从像素域变换到变换域，从而产生残余变换系数，接着可对残余变换系数进行量化。可扫描最初布置为二维阵列的经量化变换系数，以便产生变换系数的一维向量，且可应用熵译码以实现更多压缩。
技术实现思路
大体来说，在一些方面中，本专利技术描述与使用不同技术或模式预测视频单元值以及将加权因子应用到每一模式计算以确定所述视频单元值有关的技术。在一些实施例中，所述加权因子为预定的，且可译码于视频位流中。在一些实施例中，所述加权因子是基于所述视频单元在相关联块内的位置而确定。举例来说，所述加权因子可基于所述视频单元在所述块内的所述位置而选自加权因子的预定列表或群组。在另一实施例中，所述加权因子是通过使用视频块位置信息而计算。在一个实施例中，所述视频单元(例如，像素)到所述块的顶部及/或左边缘越近，与帧内预测模式相关联的加权单元就越大。在另一实施例中，所述视频单元距所述块的顶部及左边缘越远，与帧内BL预测模式相关联的所述加权单元就越大。一种根据某些方面的用于译码视频信息的设备包含存储器单元及与所述存储器单元通信的处理器。所述存储器单元存储与参考层及对应增强层相关联的视频信息。所述处理器至少部分基于通过第一加权因子加权的帧内预测值及通过第二加权因子加权的在所述参考层中的共置视频单元的值而确定定位在所述增强层内的一位置处的视频单元的值，其中所述帧内预测值是基于所述增强层中的至少一个额外视频单元而确定，其中所述共置视频单元位于所述参考层中的对应于所述视频单元在所述增强层中的所述位置的位置。在一些实施例中，所述第一加权因子及所述第二加权因子中的至少一者在0与1之间。一种根据某些方面的用于译码视频信息的设备包含存储器单元及与所述存储器单元通信的处理器。所述存储器单元存储与参考层及对应增强层(EL)相关联的视频信息。所述处理器至少部分基于所述参考层中的多个像素的平均值而确定所述EL中的像素的预测值。一种根据某些方面的用于译码视频信息的设备包含存储器单元及与所述存储器单元通信的处理器。所述存储器单元存储与增强层相关联的视频信息。所述处理器将平滑滤波器应用到视频单元且在所述视频单元为像素值时将平滑滤波器应用到邻近于所述视频单元的至少一个额外视频单元。一种根据某些方面的用于译码视频信息的设备包含存储器单元及与所述存储器单元通信的处理器。所述存储器单元存储从增强层与对应参考层之间的差导出的与像素信息的差视频层相关联的差视频信息。第一空间分辨率与所述增强层相关联，且第二空间分辨率与所述参考层相关联。所述处理器在所述第一空间分辨率不等于所述第二空间分辨率时至少部分基于所述差视频层确定定位在所述增强层内的一位置处的视频单元的值。所述处理器进一步在所述第一空间分辨率等于所述第二空间分辨率时禁止至少部分基于所述差视频层确定所述视频单元的所述值。一或多个实例的细节陈述于附图及以下描述中。其它特征、目标及优势将从描述及附图且从权利要求书中显而易见。附图说明图1是说明可利用根据本专利技术中描述的方面的技术的实例视频编码及解码系统的框图。图2是说明可实施根据本专利技术中描述的方面的技术的视频编码器的实例的框图。图3是说明可实施本专利技术中描述的方面的技术的视频解码器的实例的框图。图4是说明视频译码器的实例的框图。图5说明用于帧内预测的各种模式。图6是说明预测过程的框图。图7是说明当前预测单元及其相邻单元的框图。图8是说明增强层差域译码及常规像素域译码的框图。图9是说明使用相邻值来确定差域预测的框图。图10是经加权平面帧内预测模式实施方案的框图。图11是经加权平面帧内预测模式实施方案的另一实施例的框图。图12是经加权平面帧内预测模式实施方案的另一实施例的框图。图13是经加权平面帧内预测模式实施方案的另一实施例的框图。图14是说明DC预测模式的实施方案的框图。图15是说明根据本专利技术的方面的用于经加权平面帧内预测的实例方法的流程图。图16是说明根据本专利技术的方面的用于经加权平面帧内预测的实例方法的流程图。图17是说明根据本专利技术的方面的用于经加权平面帧内预测的实例方法的流程图。图18是说明根据本专利技术的方面的用于经加权平面帧内预测的实例方法的流程图。图19说明平面帧内预测模式的实例。图20说明用于可缩放视频译码的平面模式帧内预测扩展的一个实施例。图21说明使用基础与增强层预测样本的组合的增强层帧内预测的一个实施例。图22说明差域帧内预测中的所提议帧内残差预测模式的一个实施例。图23说明用于45度帧内预测方向的实例1-D方向变换。图24A说明用于帧内DC预测的滤波的一个实施例。图24B说明用于垂直及/或水平预测模式的滤波的一个实施例。具体实施方式本专利技术中描述的技术大体涉及可缩放视频译码(SVC)及3D视频译码。举例来说，技术可与高效率视频译码(HEVC)可缩放视频译码(SVC)扩展相关，且与HEVCSVC扩展一起使用或在所述HEVCSVC扩展内使用。HEVCSVC扩展也可称作可缩放HEVC(SHVC)。在SVC扩展中，可存在多个视频信息层。在最底层级处的层可充当基础层(BL)，且在最顶部的层可充当增强型层(enhancedlayer，EL)。“增强型层”有时称作“增强层(enhancementlayer)”，且这些术语可互换地使用。所有在中间的层可充当EL或BL，或EL及BL两者。举例来说，在中间的层可为用于在其下方的层(例如基础层或任何介入增强层)的EL，且同时充当用于在其上方的增强层的BL。仅出于说明的目的，本本文档来自技高网...

【技术保护点】
一种经配置以译码视频信息的设备，所述设备包括：存储器单元，其经配置以存储与参考层及对应增强层相关联的视频信息；以及处理器，其与所述存储器单元通信，所述处理器经配置以至少部分基于通过第一加权因子加权的帧内预测值及通过第二加权因子加权的在所述参考层中的共置视频单元的值而确定定位在所述增强层内的一位置处的视频单元的值，其中所述帧内预测值是基于所述增强层中的至少一个额外视频单元而确定，其中所述共置视频单元位于所述参考层中的对应于所述视频单元在所述增强层中的所述位置的位置。

【技术特征摘要】
【国外来华专利技术】2012.08.31 US 61/696,107;2012.09.28 US 61/707,660;1.一种经配置以译码视频信息的设备，所述设备包括：存储器，其经配置以存储与参考层及对应增强层相关联的视频信息；以及硬件处理器，其与所述存储器通信，所述处理器经配置以从(1)通过第一加权因子加权的帧内预测值与(2)通过第二加权因子加权的在所述参考层中的共置视频单元的值确定定位在所述增强层内的一位置处的视频单元的值，其中所述帧内预测值是基于所述增强层中的至少一个额外视频单元而确定，其中所述共置视频单元位于所述参考层中的对应于所述视频单元在所述增强层中的所述位置的位置，其中所述第一加权因子及所述第二加权因子是基于所述视频单元的所述位置而计算，并且其中所述第一加权因子与和所述视频单元相关联的二维像素位置成比例，且由两个维度中的一个维度内的像素样本的总数所加权，并且其中所述第二加权因子是从所述第一加权因子确定的。2.根据权利要求1所述的设备，其中所述帧内预测值是基于平面帧内预测模式而确定。3.根据权利要求1所述的设备，其中所述增强层中的所述至少一个额外视频单元为定位在所述增强层内的所述位置处的所述视频单元的水平相邻视频单元或垂直相邻视频单元。4.根据权利要求1所述的设备，其中所述第一加权因子及所述第二加权因子中的至少一者在0与1之间。5.根据权利要求1所述的设备，其中所述第一加权因子及所述第二加权因子在视频位流中用信号通知。6.根据权利要求1所述的设备，其中所述第一加权因子及所述第二加权因子不在视频位流中用信号通知。7.根据权利要求1所述的设备，其中所述第一加权因子及所述第二加权因子是基于所述视频单元的所述位置而从一组预定值选择。8.根据权利要求1所述的设备，其中所述第一加权因子及所述第二加权因子(W1、W2)被计算为：W1＝(x+y)/宽度，且W2＝1-W1，其中x对应于所述视频单元的沿着视频信息块内的x方向的位置，y对应于所述视频单元的沿着所述块内的y方向的位置，且宽度对应于所述块的宽度。9.根据权利要求1所述的设备，其中所述参考层包括基础层。10.根据权利要求1所述的设备，其中基于所述增强层中的所述至少一个额外视频单元的所述帧内预测值为预测单元。11.根据权利要求1所述的设备，其中所述设备包括以下各者中的一或多者：桌上型计算机、笔记本计算机、膝上型计算机、平板计算机、机顶盒、电话手持机、智能电话、无线通信装置、智能板、电视、相机、显示装置、数字媒体播放器、视频游戏控制台或者视频流式传输装置。12.根据权利要求1所述的设备，其中所述处理器经配置以至少部分基于所述参考层中的多个像素的平均值确定所述增强层EL中的像素的预测值。13.根据权利要求12所述的设备，其中所述处理器进一步经配置以在所述增强层中的所述像素在所述增强层中不具有相邻像素时至少部分基于所述参考层中的多个像素的平均值确定所述EL中的所述像素的所述预测值。14.根据权利要求12所述的设备，其中所述处理器进一步经配置以在所述像素定位于具有左方及右方边缘的块内且所述像素沿着所述左方及右方边缘中的至少一者定位时，至少部分基于所述参考层中的多个像素的平均值确定所述EL中的所述像素的所述预测值。15.根据权利要求1所述的设备，其中所述处理器进一步经配置以在所述视频单元为像素值时将平滑滤波器应用于所述视频单元及邻近于所述视频单元的至少一个额外视频单元。16.根据权利要求15所述的设备，在所述视频单元不为像素值的情况下不应用所述平滑滤波器。17.根据权利要求1所述的设备，其中所述参考层及所述增强层各自与层识别符相关联，且所述处理器进一步经配置以基于所述层识别符自适应地选择译码扫描模式。18.根据权利要求1所述的设备，其中：所述存储器进一步经配置以存储与从所述参考层与所述对应增强层之间的差导出的像素信息的差视频层相关联的差视频信息，其中第一空间分辨率与所述增强层相关联，且第二空间分辨率与所述参考层相关联；且所述硬件处理器进一步经配置以在所述第一空间分辨率不等于所述第二空间分辨率时至少部分基于所述差视频层确定定位在所述增强层内的所述位置处的所述视频单元的值，且所述处理器进一步经配置以在所述第一空间分辨率等于所述第二空间分辨率时不至少部分基于所述差视频层确定所述视频单元的所述值。19.一种译码视频信息的方法，所述方法包括：存储与参考层及对应增强层相关联的视频信息；以及从(1)通过第一加权因子加权的帧内预测值与(2)通过第二加权因子加权的在所述参考层中的共置视频单元的值确定定位在所述增强层内的一位置处的视频单元的值，其中所述帧内预测值是基于所述增强层中的至少一个额外视频单元而确定，其中所述共置视频单元位于所述参考层中的对应于所述视频单元在所述增强层中的所述位置的位置，其中所述第一加权因子及所述第二加权因子是基于所述视频单元的所述位置而计算，并且其中所述第一加权因子与和所述视频单元相关联的二维像素位置成比例，且由这些维度中的一个维度内的像素样本的总数所加权，并且其中所述第二加权因子是从所述第一加权因子确定的。...

【专利技术属性】
技术研发人员：克里希纳坎斯·拉帕卡，陈建乐，马尔塔·卡切维奇，瓦迪姆·谢廖金，
申请(专利权)人：高通股份有限公司，
类型：发明
国别省市：美国;US