一种三维视频编码和解码方法,根据控制标记自适应地将摄像机参数合并到视频比特流中。基于与多个深度导向的编码工具相关的多个个别控制标记的组合可推导所述控制标记。另一个控制标记可以合并在视频比特流中,以指出当前层是否需要摄像机参数。在另一个实施例中,使用第一标记和第二标记以自适应地控制视频比特流中的每一层或每一视角的摄像机参数的存在和位置。第一标记指出视频比特流中的每一层或每一视角的摄像机参数是否存在。第二标记指出在视频流中每一层或每一视角的摄像机参数的位置。
【技术实现步骤摘要】
【国外来华专利技术】【专利说明】H维视频编码的摄像机参数发信的方法和装置 巧001]相关申请的交叉引用 本申请要求下列申请的优先权:2013年7月19日递交的申请号为61/856,321,名称 为维视频编码的摄像机参数发信"的美国临时案;2013年7月30日递交的申请号为61/ 859,797,名称为维视频编码的自适应摄像机参数发信"的美国临时案;2013年7月31日 递交的申请号为6 1/860, 707,名称为维视频编码的摄像机参数发信的限制 (Restriction)"的美国临时案;2013年10月14日递交的申请号为61/890,366,名称为"立维 视频编码的摄像机参数发信的约束(Constraints)"的美国临时案;2013年10月15日递交的 申请号为61/891,201,名称为维视频编码的摄像机参数发信"的美国临时案;2013年10 月30日递交的申请号为61/897,364,名称为维视频编码的基于视角顺序索引的摄像机 参数发信"的美国临时案。在此合并参考运些申请案的申请标的。
本专利技术有关于S维(three-dimensional,3D)视频编码。特别是,本专利技术有关于S 维视频编码中的=维编码工具的摄像机参数发信。
技术介绍
=维电视一直是近几年的技术趋势,意图给观众带来非常好的观看体验。目前已 经开发出了多种支持=维观看的技术。其中,对于=维电视应用程序而言,多视角视频 (multi-view video)是关键技术之一。传统的视频是二维(2D)媒体,仅为观众提供从摄像 机的角度看到的单一视角(single view)。然而,多视角视频能够提供动态场景的任意视点 (arbitraiy viewpoints),并提供给观众W真实感。[000引多视角视频通常是通过使用多个摄像机同时捕获一个场景而产生的,其中多个摄 像机都被设置在适当的位置,W使每个摄像机从一个视点捕捉场景。因此,多个摄像头捕捉 到相应于多个视角的多个视频序列。为了提供更多的视角,更多的摄像头已被用来产生与 多个视角相关的大量的视频序列。因此,多视角视频将需要很大的存储空间W存储和/或需 要高带宽W传输。因此,在该领域中多视角视频编码技术已经已被开发出来,W减少所需的 存储空间或传输带宽。 -个简单的方法是,简单地将传统的视频编码技术分别适用于每个单一视角视频 序列,并忽略多个不同视角之间的任何相关。运样的编码系统将是非常低效的。为了提高多 视角视频编码的效率,多视角视频编码利用视角间冗余(inter-view redundancy)。多种3D 编码工具正在W扩展现有视频编码标准的方式来开发中。例如,标准开发活动已扩展 H. 264/先进视频编码(advanced video coding,AVC)和高效视频编码化igh efficien巧 video coding,肥VC)至多视角视频编码(multi-view video coding,MVC)和3D编码。 用于3D-HEVC和3D-AVC的各种已开发或正在开发的3D编码工具如下。 分享相邻视角的先前编码的纹理信息(previously coded texture information),被称为视差补偿预测化 i spar ity-Compensated Predict ion, DCP)的技术已 被列入3D-HTM,作为运动补偿预测(motion-compensated prediction,MCP)的另一种编码 工具。MCP是指利用相同视角的先前编码图像的图像间预测(inter-pic化re prediction), 而DCP指使用相同存取单元中其他视角的先前编码图像的图像间预测。图I为合并MCP和DCP 的3D视频编码系统的示意图。用于DCP的矢量(110)被称为视差矢量(disparity vector, DV),运是模拟MCP中使用的运动矢量(motion vector,MV)。图I说明了与MCP相关的S个运 动矢量(120、130和140)。此外,DCP块的视差矢量也可W由来自于相邻块或时间轴上同位块 (temporal collocated blocks)有利用视角间参考图像的视差矢量预测器(disparity vector predicto;r,DVP)候选来预测。在当前的3D-HTM中,当为合并/跳跃模式(Merge/Skip modes)获得视角间合并模式候选(inter-view Merge candidate)时,如果相应的块的运动 信息不可用或无效,视角间合并模式候选被视差矢量所取代。 视角间残差预测(Inter-view residual prediction)是另一个用于3D-HTM的编 码工具。如图2所示,为了分享相邻视角的先前编码的残差信息,当前预测块(即,预测单元 (prediction unit, PU))的残差信号,可W通过视角间图像中的相应的块的残差信号来预 。相应的块可W通过各自的视差矢量来定位。相应于特定摄像机位置的视频图像和深度 图(depth map)是由视角标识符(view identifier)来指出(indicate)的(例如,图2中的 V0、V1和V2)。属于相同摄像机位置的所有视频图像和深度图,都与相同的视角索引(view index)(即,视角顺序索引)相关。视角顺序索引用于指定存取单元内的编码顺序,W及在易 于出错的环境(error-prone environment)中检测丢失的视角。存取单元包括相应于相同 时刻(same time instant)的所有视频图像和深度图。在存取单元中,视角索引等于0的视 频图像和存在的相关深度图会最先编码,接下来是视角索引等于1的视频图像和深度图,W 此类推。视角索引等于0的视角(即,图2中的VO)也被称为基本视角或独立视角。基本视角视 频图像可W不依赖其他视角而使用常规的肥VC视频编码器来进行编码。 在图2中可W看到,对于当前块,运动矢量预测器(MVP)/视差矢量预测器(DVP)可 W从视角间图像中的视角间块(inter-view block)来得到。在下面,视角间图像中的视角 间块可W简写为视角间块。得到的候选被称为视角间候选(inter-view candidate),可作 为视角间MVP和DVP。基于其他视角中先前编码的运动信息,编码工具编码当前块(例如,当 前的预测单元)的运动信息,被称为视角间运动参数预测。此外,在相邻视角中的相应的块 被称为视角间块,视角间块使用从当前图像的当前块的深度信息得到的视差矢量来定位。 图2所示的实施例相应的视角编码顺序为从VO(即,基础视角巧IjVl,再到V2。在当 前图像中被编码的当前块是V2。根据HTM3.1,在先前编码视角中的参考块的所有运动矢量 可W被视为视角间候选,即使视角间图像不在当前图像的参考图像列表中。在图2中,帖 210、220和230分别相应于在时间tl来自于视角V0、V1和V2的视频图像或深度图。块232是当 前视角中的当前块,块212和块222分别为视角VO和Vl中的同位当前块(col located current block)。对于视角VO中的同位当前块212,视差矢量216用于定位视角间同本文档来自技高网...
【技术保护点】
一种视频解码器解码三维视频数据的方法,其特征在于,包括:接收与压缩三维视频数据相关的视频比特流;确定控制标记;如果所述控制标记指出摄像机参数被发信至当前层,从所述视频比特流中获取所述摄像机参数;如果所述控制标记指出所述摄像机参数被发信于所述当前层,使用所述摄像机参数从所述视频比特流解码所述当前层的当前纹理数据或深度数据;以及提供所述当前层的解码的当前纹理数据或深度数据。
【技术特征摘要】
【国外来华专利技术】...
【专利技术属性】
技术研发人员:张毓麟,陈渏纹,林建良,
申请(专利权)人:联发科技股份有限公司,
类型:发明
国别省市:中国台湾;71
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。