三维以及多视图视频编码中导出默认视差向量的方法技术

技术编号:13081496 阅读:44 留言:0更新日期:2016-03-30 14:01
本发明专利技术揭露了使用统一的视差向量导出的三维或多视图视频编码或解码系统的方法及装置。当使用已导出的视差向量的三维编码工具被选择,根据本发明专利技术实施例将首先从一个或多个相邻块中获得已导出DV。如果已导出DV是可用的,使用已导出DV将已选择的三维编码工具被应用到当前块。如果已导出DV不可用,使用默认DV将已选择的三维编码工具被应用到当前块,其中,默认DV被设置为指向当前块的参考图片列表中的视图间参考图片。

【技术实现步骤摘要】
【国外来华专利技术】【专利说明】【相关申请的交叉引用】本专利技术主张申请于2013年8月13日,序列号为61/865,346,标题为“Inter-viewReference Picture Select1n and Its Except1n Handler in 3D Video Coding”的美国临时专利申请,以及申请于2013年10月25日,序列号为61/895,468,标题为“Methods ofderiving the default disparity vector in multiview and 3D video coding,,的美国临时专利申请的优先权。将以上美国临时专利申请以参考的方式并入本文中。
本专利技术涉及三维视频编码。特别地,本专利技术涉及三维(Three-dimens1nal,3D)视频编码中的视差向量导出。【
技术介绍
】三维电视技术是近年来的技术发展趋势,其试图给观看者带来轰动的观看体验(viewing experience)。各种技术都被开发出来以使三维观看成为可能。其中,多视图视频(mult1-view video)是三维电视应用中的一个关键技术。现有的视频是二维(two-dimens1nal)介质,二维介质只能给观看者提供来自照相机视角的一个场景的单个视图。然而,多视图视频可以提供动态场景的任意视角,并为观看者提供真实的感觉。通常的,多视图视频是通过同时地使用多个相机捕捉场景来创建的,其中,多个照相机都被合适地定位,以使每个照相机从一个视角捕捉场景。因此,多个相机将捕捉对应多个视图的多个视频序列。为了提供更多的视图,需要使用更多的相机来产生具有与视图相关联的大量视频序列的多视图视频。因此,多视图视频将需要大量的存储空间来存储和/或需要高的带宽来传送。因此,在本领域中,多视图视频编码技术被开发出来以减少所需要的存储空间或传送带宽。—个直接方法可以简单地应用于现有的视频编码技术,使每个单个视图视频序列独立且忽视不同视图中的任何关联。这样的编码系统将是非常低效的。为了提高多视图视频编码效率,多视图视频编码利用视图间冗余。通过扩展现存的视频编码标准,各种3D编码工具已经被开发或正在被开发。例如,有标准开发活动来将H.264/高级视频编码(advancedvideo coding,AVC)以及高效视频编码(high efficiency video coding,HEVC)扩展到多视图视频编码(mult1-view video coding,MVC)以及3D编码。已开发出来的对应新标准分别被称为3D-HEVC或3D-AVC编码。用于3D-HEVC以及3D-AVC的各种已被开发出来或正在被开发的3D编码工具综述如下。为了共享邻近视图的先前已编码的纹理信息,一种被称为视差补偿预测(Disparity-Compensated Predict1n,DCP)的技术被包括到基于HEVC的三维视频编码的测试模型(test Model for three-dimens1nal video coding based on HEVC,3D-HTM)中以作为动补偿预测(mot1n-compensated predict1n,MCP)的备选编码工具。MCP是关于使用相同视图中先前已编码图片的图片间预测,而DCP是关于相同存取单元中其它视图的先前已编码图片的图片间预测。图1所示为结合MCP以及DCP的3D视频编码系统的示例。用于DCP的向量110被称为视差向量(disparity vector,DV),其模拟用于MCP的运动向量(mot1n vector,MV)。图1显示了与MCP相关联的三个MV120、130以及140。此外,DCP块的DV还可由视差向量预测(disparity vector predictor,DVP)候选来预测,DVP候选是由也使用视图间参考图片的相邻块或时间对应块导出。于当前3D-HTM中,当导出用于合并/跳过模式的视图间合并候选(Merge candidate)时,如果对应块的运动信息不可用或无效的,视图间合并候选由DV来替代。视图间运动预测(Inter-view mot1n predict1n)用于共享参考视图的先前已编码运动信息。为了导出附属视图中当前块的候选运动参数,用于当前块的DV首先被导出,且接着,通过将DV增加到当前块的位置,参考视图中已编码图片中的预测块被定位。如果预测块是使用MCP来编码,相关的运动参数可用作当前视图中当前块的候选运动参数。已导出DV还可被直接用作DCP的候选DV。视图间残差预测(Inter-viewresidual predict1n)是用于3D-HTM的另一编码工具。为了共享邻近视图的先前已编码的残差信息,当前预测块(即,预测单元(predict1nuni t,PU))的残差信号可由视图间图片中的对应块的残差信号来预测。对应块可由相应DV来定位。对应于特定照相机位置的视频图片以及深度图由视图标识符(即,V0、V1以及V2)来指示。属于相同照相机位置的所有视频图片以及深度图通过相同视图1d(S卩,视图标识符)被关联。视图标识符被用于在存取单元中指定编码顺序,且于易出错环境中检测丢失的视图(missing view)。存取单元包括对应于相同时刻的所有视频图片以及深度图。于存取单元中,如果存在视图1d等于0的深度图,则视图1d等于0的视频图片及相关的深度图首先被编码,接下来是视图1d等于1的视频图片以及深度图等。视图1d等于0(即,V0)的视图也被称作基础视图或独立视图。基础视图视频图片可使用现有的HEVC视频编码器不依赖于其它视图被编码。对于当前块,运动向量预测(mot1n vector predictor,MVP)/视差向量预测(disparity vector predictor,DVP)可以从视图间图片的视图间块导出。在下文中,视图间图片的视图间块被简称为视图间块。已推导出的候选被称为视图间候选,其可以是视图间MVP或DVP。基于其它视图中先前已编码的运动信息来编码当前块(例如,当前PU)的运动信息的编码工具被称为视图间运动参数预测(inter-view mot1n parameterpredict1n)。此外,相邻视图的对应块被称为视图间块,且视图间块使用从当前图片中的当前块的深度信息导出的视差向量来定位。视图合成预测(View Synthesis Predict1n,VSP)是一种移除来自不同视角的视频信号中的视图间冗余的技术,于VSP中,合成信号被用作预测当前图片的参考。于3D-HEVC测试模型HTM-7.0中,存在一过程来导出视差向量预测,被称为相邻块视差向量(Neighboring Block Disparity Vector,NBDV)。接着,已导出视差向量被用于获取参考视图的深度图像中的深度块。导出虚拟深度的过程可被应用于VSP以定位已编码视图的对应深度块。已获取的深度块可具有与当前PU相同的大小,且接着将被用于对当前PU执行后向扭曲(backward warping)。此外,扭曲操作可被执行于子等级精度,例如2x2或4x4块。于当前实现中,VSP仅被用于纹理分量编码。VSP预测也被增加以作为新的合并候选来显示VSP预测的使本文档来自技高网...

【技术保护点】
一种用于三维或多视图视频编码或解码系统的视频编码的方法,其特征在于,所述方法包括:接收与附属视图中当前块相关联的输入数据;确定已选择的三维编码工具,其中,所述三维编码工具使用已导出视差向量;从所述当前块的一个或多个相邻块中导出用于所述当前块的所述已导出视差向量;如果所述已导出视差向量是可用的,使用所述已导出视差向量将所述已选择的三维编码工具应用到所述当前块;以及如果所述已导出视差向量不可用,使用默认视差向量将所述已选择的三维编码工具应用到所述当前块,其中,所述默认视差向量被设置为指向所述当前块的一个参考图片列表中的视图间参考图片。

【技术特征摘要】
【国外来华专利技术】...

【专利技术属性】
技术研发人员:林建良张娜陈渏纹安基程张毓麟
申请(专利权)人:联发科技股份有限公司
类型:发明
国别省市:中国台湾;71

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1