处理视频数据的方法和设备及计算机可读介质技术

本发明专利技术提供用于处理视频数据的装置和方法。所述方法可包含从所接收的视频数据提取输出操作点。如果所述输出操作点对应于整个位流和所述整个位流的时间子集中的一者，其中仅基础层作为输出，那么所述方法可包含执行第一位流符合性测试。如果所述输出操作点对应于由活动视频参数集VPS的基础VPS规定的层集合和所述层集合的时间子集中的一者，其中将仅输出所述基础层，那么所述方法可包含执行第二位流符合性测试。如果所述输出操作点对应于由所述活动VPS的VPS扩展规定的输出层集合OLS和所述OLS的时间子集中的一者，那么所述方法可包含执行第三位流符合性测试。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及多层视频译码。更确切地说，本专利技术涉及用于多层视频译码中符合性和互操作性的方法，包含用信号发送简档、层次和层级信息，用信号发送输出层集合的，使用假想参考解码器(HRD)参数，以及位流符合性测试。
技术介绍
数字视频能力可以并入到多种多样的装置中，包含数字电视、数字直播系统、无线广播系统、个人数字助理(PDA)、膝上型或桌上型计算机、平板计算机、电子图书阅读器、数码相机、数字记录装置、数字媒体播放器、视频游戏装置、视频游戏控制台、蜂窝式或卫星无线电电话(所谓的“智能电话”)、视频电话会议装置、视频流式传输装置及其类似者。数字视频装置实施一或多种视频译码技术。视频装置可通过实施此类视频译码技术来更有效率地发射、接收、编码、解码和/或存储数字视频信息。视频译码技术包含(但不限于)在由ITU-TH.261、ISO/IECMPEG-1视觉、ITU-TH.262或ISO/IECMPEG-2视觉、ITU-TH.263、ISO/IECMPEG-4视觉及ITU-TH.264或ISO/IECMPEG-4高级视频译码(AVC)(包含其可缩放视频译码(SVC)及多视图视频译码(MVC)扩展)及相对新的高效视频译码(HEVC)标准定义的标准中所描述的技术。HEVC标准最近被国际电信联盟电信标准化部门(ITU-T)的视频译码专家组(VCEG)与由国际标准化组织(ISO)及国际电工委员会(IEC)形成的移动图片专家组(MPEG)的视频译码联合合作小组(JCT-VC)定案。可从phenix.int-evry.fr/jct/doc_end_user/documents/12_Geneva/wg11/JCTVC-L1003-v34.zip获得HEVC规范的最新工作草案(WD)(被称为HEVCWD10)。HEVC的多视图扩展(即MV-HEVC)也正由JCT-3V开发。下文中的最近工作草案MV-HEVCWD3可从phenix.it-sudparis.eu/jct2/doc_end_user/documents/3_Geneva/wg11/JCT3V-C1004-v4.zip获得。被称为SHVC的对HEVC的可缩放扩展也正由JCT-VC开发。下文中被称为SHVCWD2的最近SHVC工作草案可从phenix.int-evry.fr/jct/doc_end_user/documents/13_Incheon/wg11/JCTVC-M1008-v1.zip获得。视频译码技术包含空间(图片内)预测和/或时间(图片间)预测以减少或去除视频序列中固有的冗余。对于基于块的视频译码，视频切片((例如，视频帧或视频帧的一部分)可以分割成视频块，所述视频块也可被称为树块、译码单元(CU)和/或译码节点。使用相对于同一图片中的相邻块中的参考样本的空间预测对图片的经帧内译码(I)切片中的视频块进行编码。图片的经帧间译码(P或B)切片中的视频块可使用相对于同一图片中的相邻块中的参考样本的空间预测或相对于其它参考图片中的参考样本的时间预测。图片可被称为帧，且参考图片可被称为参考帧。空间或时间预测产生用于待译码块的预测块。残余数据表示待译码原始块与预测块之间的像素差。经帧间译码块是根据指向形成预测块的参考样本块的运动向量和指示经译码块与预测块之间的差的残余数据经编码。经帧内译码块是根据帧内译码模式和残余数据经编码。为了进一步压缩，可将残余数据从像素域变换到变换域，从而产生残余变换系数，接着可量化所述残余变换系数。可扫描一开始按二维阵列排列的经量化变换系数，以便产生变换系数的一维向量，且可应用熵译码以实现更多压缩。可通过(例如)从多个视角编码视图来产生多视图译码位流。已经开发使用多视图译码方面的一些三维(3D)视频标准。举例来说，不同视图可传输左眼和右眼视图以支持3D视频。替代地，一些3D视频译码过程可应用所谓的多视图加深度译码。在多视图加深度译码中，3D视频位流可不仅含有纹理视图分量，而且含有深度视图分量。举例来说，每一视图可包括一个纹理视图分量和一个深度视图分量。
技术实现思路
一般来说，本专利技术描述与多层视频译码中的位流符合性和互操作性改进有关的系统和方法。本专利技术的系统、方法和装置各自具有若干创新方面，其中没有单个方面单独负责本文中所揭示的合乎需要的属性。本专利技术的一个方面提供一种处理视频数据的方法。所述方法可包含接收具有多个输出操作点的经译码视频数据。所述方法也可包含从所述多个输出操作点提取选定输出操作点。响应于所述选定输出操作点对应于整个位流和所述整个位流的时间子集中的一者，其中将仅输出基础层，所述方法也可包含对所述选定输出操作点执行第一位流符合性测试，所述第一位流符合性测试是基于基础层的活动序列参数集(SPS)中的序列层级假想参考解码器(HRD)参数的集合，以及一或多个非嵌套式补充增强信息(SEI)消息。响应于所述选定输出操作点对应于由活动视频参数集(VPS)的基础VPS规定的层集合和所述层集合的时间子集中的一者，其中将仅输出所述基础层，所述方法也可包含对所述选定输出操作点执行第二位流符合性测试，所述第二位流符合性测试是基于所述基础VPS中的序列层级HRD参数的集合以及直接嵌套式SEI消息。响应于所述选定输出操作点对应于由所述活动VPS的VPS扩展规定的输出层集合(OLS)和所述OLS的时间子集中的一者，所述方法也可包含对所述选定输出操作点执行第三位流符合性测试，所述第三位流符合性测试是基于所述活动VPS中的序列层级HRD参数的集合以及间接嵌套式SEI消息。本专利技术的另一态样提供一种用于处理视频数据的装置。所述装置可具有经配置以存储经译码视频数据的存储器，所述经译码视频数据具有多个输出操作点。所述装置也可具有处理器，所述处理器可操作地耦合到所述存储器且经配置以从所述多个输出操作点提取选定输出操作点。响应于所述选定输出操作点对应于整个位流和所述整个位流的时间子集中的一者，其中将仅输出基础层，所述处理器可经进一步配置以对所述选定输出操作点执行第一位流符合性测试，所述第一位流符合性测试是基于基础层的活动序列参数集(SPS)中的序列层级假想参考解码器(HRD)参数的集合，以及一或多个非嵌套式补充增强信息(SEI)消息。响应于所述选定输出操作点对应于由活动视频参数集(VPS)的基础VPS规定的层集合和所述层集合的时间子集中的一者，其中将仅输出所述基础层，所述处理器可经进一步配置以对所述选定输出操作点执行第二位流符合性测试，所述第二位流符合性测试是基于所述基础VPS中的序列层级HRD参数的集合以及直接嵌套式SEI消息。响应于所述选定输出操作点对应于由所述活动VPS的VPS扩展规定的输出层集合(OLS)和所述OLS的时间子集中的一者，所述处理器可经进一步配置以对所述选定输出操作点执行第三位流符合性测试，所述第三位流符合性测试是基于所述活动VPS中的序列层级HRD参数的集合以及间接嵌套式SEI消息。本专利技术的另一方面提供一种用于处理视频数据的设备。所述设备可具有用于存储经译码视频数据的存储器装置，所述视频数据具有多个输出操作点。所述设备也可具有解码器装置，所述解码器装置可操作地耦合到所述存储器装置以用于从所述多个输出本文档来自技高网...

【技术保护点】
一种处理视频数据的方法，其包括：接收具有多个输出操作点的经译码视频数据；从所述多个输出操作点提取选定输出操作点；和响应于所述选定输出操作点对应于整个位流和所述整个位流的时间子集中的一者，其中将仅输出基础层，对所述选定输出操作点执行第一位流符合性测试，所述第一位流符合性测试是基于基础层的活动序列参数集SPS中的序列层级假想参考解码器HRD参数的集合，以及一或多个非嵌套式补充增强信息SEI消息，响应于所述选定输出操作点对应于由活动视频参数集VPS的基础VPS规定的层集合和所述层集合的时间子集中的一者，其中将仅输出所述基础层，对所述选定输出操作点执行第二位流符合性测试，所述第二位流符合性测试是基于所述基础VPS中的序列层级HRD参数的集合以及直接嵌套式SEI消息，响应于所述选定输出操作点对应于由所述活动VPS的VPS扩展规定的输出层集合OLS和所述OLS的时间子集中的一者，对所述选定输出操作点执行第三位流符合性测试，所述第三位流符合性测试是基于所述活动VPS中的序列层级HRD参数的集合以及间接嵌套式SEI消息。

【技术特征摘要】
【国外来华专利技术】2014.06.24 US 62/016,549;2015.06.12 US 14/737,8981.一种处理视频数据的方法，其包括：接收具有多个输出操作点的经译码视频数据；从所述多个输出操作点提取选定输出操作点；和响应于所述选定输出操作点对应于整个位流和所述整个位流的时间子集中的一者，其中将仅输出基础层，对所述选定输出操作点执行第一位流符合性测试，所述第一位流符合性测试是基于基础层的活动序列参数集SPS中的序列层级假想参考解码器HRD参数的集合，以及一或多个非嵌套式补充增强信息SEI消息，响应于所述选定输出操作点对应于由活动视频参数集VPS的基础VPS规定的层集合和所述层集合的时间子集中的一者，其中将仅输出所述基础层，对所述选定输出操作点执行第二位流符合性测试，所述第二位流符合性测试是基于所述基础VPS中的序列层级HRD参数的集合以及直接嵌套式SEI消息，响应于所述选定输出操作点对应于由所述活动VPS的VPS扩展规定的输出层集合OLS和所述OLS的时间子集中的一者，对所述选定输出操作点执行第三位流符合性测试，所述第三位流符合性测试是基于所述活动VPS中的序列层级HRD参数的集合以及间接嵌套式SEI消息。2.根据权利要求1所述的方法，其进一步包括仅当所述选定输出操作点对应于在所述活动VPS的基础部分中标识的OLS时，应用直接嵌套式SEI消息，所述直接嵌套式SEI消息是缓冲器周期BP、图片时序PT和解码器单元信息DUISEI消息中的一者。3.根据权利要求1所述的方法，其进一步包括仅当所述选定输出操作点对应于在所述VPS扩展中规定的OLS时，应用所述间接嵌套式SEI消息，所述间接嵌套式SEI消息是BP、PT和DUISEI消息中的一者。4.根据权利要求1所述的方法，其进一步包括在所述SPS、所述基础VPS和所述VPS扩展中的一者中的hrd_parameters()语法结构中包含序列层级HRD参数的所述集合。5.根据权利要求1所述的方法，其中所述SEI消息包括BP、PT和DUISEI消息中的一者。6.根据权利要求1所述的方法，其中所述非嵌套式SEI消息直接包含在SEI网络抽象层NAL单元中。7.根据权利要求1所述的方法，其中所述直接嵌套式SEI消息直接包含在可缩放嵌套SEI消息中。8.根据权利要求1所述的方法，其中所述间接嵌套式SEI消息含于位流分割区嵌套SEI消息中，所述位流分割区嵌套SEI消息含于可缩放嵌套SEI消息中。9.根据权利要求1所述的方法，其进一步包括对所述选定输出操作点执行所述第三位流符合性测试，所述第三位流符合性测试进一步基于所述活动VPS中的序列层级HRD参数的所述集合以及位于所述基础VPS和所述VPS扩展中的一者中的间接嵌套式SEI消息。10.根据权利要求1所述的方法，其进一步包括从所述经译码视频数据的所述多个输出操作点选择所述选定输出操作点，所述选定输出操作点是整个位流的子位流。11.一种用于处理视频数据的装置，其包括：存储器，其经配置以存储经译码视频数据，所述经译码视频数据具有多个输出操作点；和处理器，其可操作地耦合到所述存储器且经配置以：从所述多个输出操作点提取选定输出操作点；和响应于所述选定输出操作点对应于整个位流和所述整个位流的时间子集中的一者，其中将仅输出基础层，对所述选定输出操作点执行第一位流符合性测试，所述第一位流符合性测试是基于基础层的活动序列参数集SPS中的序列层级假想参考解码器HRD参数的集合，以及一或多个非嵌套式补充增强信息SEI消息，响应于所述选定输出操作点对应于由活动视频参数集VPS的基础VPS规定的层集合和所述层集合的时间子集中的一者，其中将仅输出所述基础层，对所述选定输出操作点执行第二位流符合性测试，所述第二位流符合性测试是基于所述基础VPS中的序列层级HRD参数的集合以及直接嵌套式SEI消息，和响应于所述选定输出操作点对应于由所述活动VPS的VPS扩展规定的输出层集合OLS和所述OLS的时间子集中的一者，对所述选定输出操作点执行第三位流符合性测试，所述第三位流符合性测试是基于所述活动VPS中的序列层级HRD参数的集合以及间接嵌套式SEI消息。12.根据权利要求11所述的装置，其中所述处理器经进一步配置以仅当所述选定输出操作点对应于在所述活动VPS的基础部分中标识的OLS时，应用直接嵌套式SEI消息，所述直接嵌套式SEI消息是缓冲器周期BP、图片时序PT和解码器单元信息DUISEI消息中的一者。13.根据权利要求11所述的装置，其中所述处理器经进一步配置以仅当所述选定输出操作点对应于在所述VPS扩展中规定的OLS时，应用间接嵌套式SEI消息，所述间接嵌套式SEI消息是BP、PT和DUISEI消息中的一者。14.根据权利要求11所述的装置，其中序列层级HRD参数的所述集合包含在所述SPS、所述基础VPS和所述VPS扩展中的一者中的hrd_parameters()语法结构中。15.根据权利要求11所述的装置，其中所述SEI消息包括BP、PT和DUISEI消息中的一者。16.根据权利要求11所述的装置，其中所述非嵌套式SEI消息直接包...

【专利技术属性】
技术研发人员：王益魁，
申请(专利权)人：高通股份有限公司，
类型：发明
国别省市：美国;US