用于解码增强型视频流的方法和装置制造方法及图纸

技术编号:10732825 阅读:112 留言:0更新日期:2014-12-10 10:13
公开了用于解码增强型视频流的方法和装置。一种解码包括基本层视频访问单元和增强层视频访问单元的增强型视频流的方法,每个访问单元包括多个语法结构,该方法包括:将基本层访问单元的语法结构传递到基本层缓冲器;将增强层访问单元的语法结构传递到增强层缓冲器;以预定序列输出传递到基本层缓冲器的语法结构;以预定序列输出传递到增强层缓冲器的语法结构;以及重新组合分别由基本层缓冲器和增强层缓冲器输出的语法结构的序列,以形成完整的增强型访问单元,包括预定序列的基本层语法结构和增强层语法结构。

【技术实现步骤摘要】
用于解码增强型视频流的方法和装置本申请是分案申请,原案的申请号为200980107819.5,申请日为2009年3月4日,专利技术名称为“用于解码增强型视频流的方法和装置”。相关申请的交叉引用本申请基于35USC120要求2008年3月6日提交的美国临时申请No.61/034,370的权益,其全部公开内容通过引用并入这里用于所有的目的。
本专利技术涉及用于解码增强型视频流的方法和装置。
技术介绍
参考附图中的图1,视频编码器10从诸如照相机的源接收通常为SMPTE292M中定义的HD-SDI格式的原始视频数据。视频编码器利用HD-SDI数据来生成视频基础流,并且将该视频基础流提供给视频分组器(packetizer)14,该视频分组器14产生由可变长度的分组组成的视频分组化基础流(PES)。通常,视频PES的每个分组包含一个或多个视频帧。类似地,音频编码器(未示出)从例如麦克风接收原始音频数据,并且将音频基础流提供给音频分组器,该音频分组器产生由可变长度的分组组成的音频PES。视频分组器和音频分组器将视频PES和音频PES提供到传输流复用器18,该传输流复用器18将不同的相应节目标识符(PID)指配给视频PES和音频PES,并且将视频PES和音频PES的可变长度的分组组织为固定长度的MPEG-2传输流(TS)分组,每个分组都具有包括PES的PID的报头以及包含PES视频(或音频)数据的有效负载。可以将由传输流复用器输出的单节目传输流(SPTS)提供到节目复用器22,该节目复用器22将SPTS与传送其它节目的其它传输流进行组合,以产生多节目传输流(MPTS)。通过信道将该MPTS发射到接收机,在接收机处,节目解复用器26从MPTS中分离选定的SPTS,并且将该选定的SPTS提供给传输流解复用器30。本领域技术人员将意识到,可以将由传输流复用器输出的SPTS直接发射到传输流解复用器,而无需首先与其它传输流进行组合来创建MPTS,但是在任何一种情况下,传输流解复用器接收选定的SPTS的传输流分组,并且基于PID对它们进行分离,对传输流分组进行解分组以重建PES分组,并且将视频PES指向所谓的视频系统目标解码器(T-STD)34,并且将音频PES指向音频T-STD38。本申请的主题涉及解码视频比特流,并且因此我们将不进一步讨论音频解码器。视频T-STD34包括系统目标解码器缓冲器40和视频解码器42。STD缓冲器40在功能上等同于传输缓冲器Tb、复用缓冲器Mb和基础流缓冲器Eb。传输缓冲器Tb以可变比特速率接收视频PES,并且以恒定比特速率向复用缓冲器Mb输出数据,该复用缓冲器Mb对视频PES进行解分组,并且以恒定比特速率向基础流缓冲器Eb提供编码比特流。有时被称作解码器缓冲器或被称作编码图像缓冲器(CPB)的基础流缓冲器接收CBR比特流,并且保存用于解码图像的比特,直至它们在图像解码时立即由视频解码器全部移除。对于解码器的适当操作重要的是,解码器缓冲器不应当溢出而使得丢失比特并且无法解码图像,也不应当下溢而使得解码器缺少比特并且无法在适当时解码图像。将比特提供到解码器缓冲器由压缩数据缓冲器(CDB)46来控制,该压缩数据缓冲器(CBD)46从视频编码器10接收比特流。视频编码器以取决于CDB充满程度(fullness)的速率来向CDB提供比特。CDB以恒定速率向视频分组器14提供比特,并且复用缓冲器以相同的速率向解码器缓冲器提供比特,并且因此CDB的充满程度反映了解码器缓冲器的充满程度。通过调整对CDB的比特的提供来防止CDB的溢出/下溢,避免了解码器缓冲器的下溢/溢出。管理编码器的操作的视频压缩标准可以指定CDB应当不大于假定基准解码器(hypotheticalreferencedecoder)的解码器缓冲器。MPEG-2传输流被广泛用于通过差错信道进行的编码视频的递送。MPEG-2系统层还支持在无差错环境中的节目流(PS)中的编码视频的传输。图1图示了将视频PES作为节目流发射到视频P-STD50,作为对作为传输流递送到视频T-STD34的替代。视频编码器10所产生的比特流可以遵循在通常被称作H.264/AVC的ISO/IEC14496-10(MPEG-4部分10)高级视频编码(AVC)中所指定的视频压缩标准。H.264/AVC使用图像作为帧或场的统称。H.264/AVC将访问单元定义为网络抽象层(NAL)单元的集合,并且指定访问单元的解码通常产生解码图像。AVC编码器所产生的访问单元的NAL单元可以是包含图像信息的视频编码层(VCL)单元,或者是包含诸如隐蔽字幕(closedcaptioning)和定时的其它信息的非VCL单元。H.264/AVC的附录G规定了被称作可分级视频编码或SVC的H.264/AVC的扩展。SVC将可分级的增强提供给AVC基本层,并且可分级性包括空间可分级性、时间可分级性、SNR可分级性以及比特深度可分级性。期望SVC编码器产生符合H.264/AVC的基本层,并且在一个或多个增强层中对该基本层增加增强。在SVC的特定实施方式中所采用的每个类型的可分级性可以利用其自己的增强层。例如,如果原始视频数据是由1920×1088像素的帧组成的称为1080HD的格式,则可以通过由能够被解码为704×480像素的图像的访问单元组成的子比特流来传送基本层,而可以通过由使得适当的解码器能够通过将基本层访问单元与增强层访问单元进行组合来呈现1920×1088像素的图像的访问单元组成的子比特流来传送增强层。能够对基本层以及一个或多个增强层进行解码的解码器在这里被称为SVC解码器,而无法识别增强层并且仅能够对基本层访问单元进行解码并且因此不具有SVC能力的解码器在这里被称作AVC解码器。由SVC编码器产生的访问单元不仅包括以上提到的通常称为AVCNAL单元的基本层NAL单元,而且还包括SVCVCLNAL单元和SVC非VCLNAL单元。图2示出了如SVC标准所规定的SVC访问单元中的AVCNAL单元和SVCNAL单元的序列。例如,在编码器产生两个增强层的情况下,两个增强层的非VCLNAL单元处于图2中所示的序列的相邻块中,在包含AVC非VCLNAL单元和AVCVCLNAL单元的块之间,并且两个增强层的SVCVCLNAL单元处于在包含AVCVCLNAL单元的块之后的序列的相邻块中。从访问单元提取基本层NAL单元的SVC解码器仅选择AVC非VCLNAL单元和AVCVCLNAL单元。H.264/AVC指定了5比特的参数nal_unit_type或NUT。基于H.264/AVC,AVCNAL单元都具有1-13范围内的NUT值。SVC添加了NUT值14、20和15。然而,紧接在具有等于5或1的NUT的NAL单元之前的具有等于14的NUT的NAL单元用信号发送基本层条带,使得作为非VCLNAL单元的这些NAL单元与AVC相兼容,并且能够由AVC解码器来进行解码。参考图3,SVC解码器10’生成传送基本层以及例如两个增强层ENH1和ENH2的单一比特流。根据其功能,解码器可能期望仅接收和解码基本层,或者接收和解码基本层和增强层ENH1,或者接收和解码基本层以及两个增强层ENH1和增强层ENH2。基于MPEG-本文档来自技高网...
用于解码增强型视频流的方法和装置

【技术保护点】
一种创建增强型视频信号的方法,包括:接收包括基本层访问单元和增强层访问单元的单一比特流,从所述单一比特流中分离基本层节目流和增强层节目流,以及将定界语法结构插入到所述增强层节目流中以定界所述增强层节目流的访问单元。

【技术特征摘要】
2008.03.06 US 61/034,370;2009.02.27 US 12/395,0561.一种创建视频信号的方法,所述视频信号包括基本层分量和至少一个增强层分量,所述方法包括:接收比特流,所述比特流在多个经分组化的基础流中输送多个访问单元,其中所述多个访问单元包括基本层访问单元和增强层访问单元,并且其中每个增强层访问单元包括视频层语法结构以及非视频层语法结构;将所述比特流分离成多个视频子比特流,其中所述多个子比特流包括基本层节目流和增强层节目流;使得所述基本层访问单元和所述增强层访问单元的所述非视频层语法结构被包括在所述视频信号的经重新组合的基本层节目流中;使得所述增强层访问单元的所述视频层语法结构被包括在所述至少一个增强层分量中;使得所述增强层访问单元的所述非视频层语法结构被排除在所述至少一个增强层分量之外;将所述多个访问单元重新组合以创建所述视频信号,其中所述视频信号的所述基本层分量包括所述增强层访问单元的所述非视频层语法结构,并且其中所述视频信号的所述至少一个增强层分量不包括所述增强层访问单元的所述非视频层语法结构。2.一种创建增强型视频信号的方法,包括:接收单一比特流,所述单一比特流在多个经分组化的基础流中输送基本层访问单元和增强层访问单元,其中,每个增强层访问单元包括视频层语法结构和非视频层语法结构,从所述单一比特流中分离基本层节目流和增强层节目流,以及将所述增强层访问单元的非视频层语法结构包括在所述基本层节目流中,从而所述增强型视频信号包括基本层分量和增强层分量,所述基本层分量包括所述增强层访问单元的非视频层语法结构,所述增强层分量包括所述增强层访问单元的视频层语法结构;并且所述增强层分量不包括所述增强层访问单元的非视频层语法结构。3.一种用于创建视频信号的装置,所述视频信号包括基本层分量和至...

【专利技术属性】
技术研发人员:曼达亚姆·A·纳拉辛汉
申请(专利权)人:通用仪表公司
类型:发明
国别省市:美国;US

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1