用于随机存取点和图片类型的标识的方法技术

一种用于使用至少一个处理器重建当前网络抽象层(NAL)单元以进行视频解码的方法，包括：确定当前NAL单元为帧内随机存取图片(IRAP)NAL单元；确定紧接在当前NAL单元之前解码的先前NAL单元指示已编码视频序列(CVS)是否结束；基于确定先前NAL单元指示CVS结束，将当前NAL单元解码为来自瞬时解码器刷新(IDR)NAL单元或断链存取(BLA)NAL单元中的一个；以及基于确定先前NAL单元指示CVS未结束，将当前NAL单元解码为清洁随机存取(CRA)NAL单元；以及对解码的当前NAL单元进行重建。及对解码的当前NAL单元进行重建。及对解码的当前NAL单元进行重建。

【技术实现步骤摘要】
【国外来华专利技术】Control Units，MCU)的媒体感知网元(Media Aware Network Elements，MANE)来使某些错误恢复技术以及某些码流操作技术能够包括码流修剪。
[0009]图1描绘了根据H.264(101)和H.265(102)的NAL单元头的语法图的相关部分，在这两种情况下没有它们各自的任何扩展。在这两种情况下，forbidden_zero_bit是在某些系统层环境中用于防止起始码仿真的零位。nal_unit_type语法元素是指NAL单元携带的数据类型，其可以例如是某些切片类型、参数集类型、辅助增强信息(Supplementary Enhancement Information，SEI)消息等中的一种。H.265NAL单元头还包括nuh_layer_id和nuh_temporal_id_plus1，其指示NAL单元所属的已编码图片的空间/SNR层和时间层。
[0010]可以观察到，NAL单元头仅包括可容易解析的固定长度码字，其对码流中的其他数据例如其他NAL单元头、参数集等不具有任何解析依赖性。由于NAL单元头是NAL单元中的第一个八位字节，MANE可以容易地提取它们、解析它们、并作用于他们。相反，其他高级语法元素例如切片或图块头不易被MANE访问，因为它们可能需要保持参数集上下文和/或可变长度或已算术编码代码点的处理。
[0011]还可以观察到，如图1所示的NAL单元头不包括可以将NAL单元关联到已编码图片的信息，上述已编码图片包括多个NAL单元(例如，包括多个图块或切片，其中至少一些在各个NAL单元中被分组)。
[0012]诸如RTP(RFC 3550)、MPEG系统标准、ISO文件格式等的某些传输技术可以包括通常为定时信息的形式的特定信息，上述定时信息例如是在MPEG和ISO文件格式的示例中的呈现时间或者在RTP的示例中的采集时间，该特定信息可易于被MANE访问并且可以帮助将其相应传输单元与已编码图片相关联。然而，这些信息的语义在不同的传输/存储技术中可能不同，并且可以与在视频编码中使用的图片结构没有直接关系。因此，这些信息充其量只能是启发法，并且也可能不特别适合于识别NAL单元流中的NAL单元是否属于同一已编码图片。

技术实现思路

[0013]在实施方式中，提供了一种使用至少一个处理器重建当前网络抽象层(NAL)单元以进行视频解码的方法，该方法包括：确定当前NAL单元为帧内随机存取图片(Intra Random Access Picture，IRAP)NAL单元；确定紧接在当前NAL单元之前解码的先前NAL单元指示已编码视频序列(coded video sequence，CVS)是否结束；基于确定先前NAL单元指示CVS结束，将当前NAL单元解码为来自瞬时解码器刷新(Instantaneous Decoder Refresh，IDR)NAL单元或断链存取(Broken Link Access，BLA)NAL单元中的一个；以及基于确定先前NAL单元指示CVS未结束，将当前NAL单元解码为清洁随机存取(Clean Random Access，CRA)NAL单元；以及对解码的当前NAL单元进行重建。
[0014]在实施方式中，提供了一种用于重建当前网络抽象层(NAL)单元以进行视频解码的设备，该设备包括：至少一个存储器，其被配置成存储程序代码；以及至少一个处理器，其被配置成读取程序代码并按照程序代码的指示操作，程序代码包括：第一确定代码，其被配置成使至少一个处理器确定当前NAL单元为帧内随机存取图片(IRAP)NAL单元；第二确定代码，其被配置成使处理器确定紧接在当前NAL单元之前解码的先前NAL单元指示已编码视频序列(CVS)是否结束；第一解码代码，其被配置成使至少一个处理器基于确定先前NAL单元
指示CVS结束，将当前NAL单元解码为来自瞬时解码器刷新(IDR)NAL单元或断链存取(BLA)NAL单元中的一个；以及第二解码代码，其被配置成使至少一个处理器基于确定先前NAL单元指示CVS未结束，将当前NAL单元解码为清洁随机存取(CRA)NAL单元；以及重建代码，其被配置成使处理器对解码的当前NAL单元进行重建。
[0015]在实施方式中，提供了一种存储指令的非暂态计算机可读介质，所述指令包括：一个或更多个指令，所述一个或更多个指令当由用于重建当前网络抽象层(NAL)单元以进行视频解码的设备的一个或更多个处理器执行时使一个或更多个处理器：确定当前NAL单元为帧内随机存取图片(IRAP)NAL单元；确定紧接在当前NAL单元之前解码的先前NAL单元指示已编码视频序列(CVS)是否结束；基于确定先前NAL单元指示CVS结束，将当前NAL单元解码为来自瞬时解码器刷新(IDR)NAL单元或断链存取(BLA)NAL单元中的一个；以及基于确定先前NAL单元指示CVS未结束，将当前NAL单元解码为清洁随机存取(CRA)NAL单元；以及对解码的当前NAL单元进行重建。
附图说明
[0016]根据以下详细描述和附图，所公开的主题的另外的特征、性质和各种优点将变得更加明显，在附图中：
[0017]图1是根据H.264和H.265的NAL单元头的示意图。
[0018]图2是根据实施方式的通信系统的简化框图的示意图。
[0019]图3是根据实施方式的通信系统的简化框图的示意图。
[0020]图4是根据实施方式的解码器的简化框图的示意图。
[0021]图5是根据实施方式的编码器的简化框图的示意图。
[0022]图6是根据实施方式的NAL单元头的示意图。
[0023]图7是根据实施方式的随机存取点图片和前置图片的示意图。
[0024]图8是根据实施方式的参数集中的语法元素的示意图。
[0025]图9是根据实施方式的用于重建当前网络抽象层(NAL)单元以进行视频解码的示例处理的流程图。
[0026]图10是根据实施方式的计算机系统的示意图。
[0027]要解决的问题
[0028]现有的视频编码语法缺乏在诸如NAL单元头的高级语法结构中标识随机存取点、随机存取图片类型和前置图片类型的可易标识/可易解析的语法元素。
具体实施方式
[0029]图2示出了根据本公开内容的实施方式的通信系统(200)的简化框图。该系统(200)可以包括经由网络(250)互连的至少两个终端(210至220)。对于单向数据传输，第一终端(210)可以在本地位置处对视频数据进行编码，以经由网络(250)传输到另一终端(220)。第二终端(220)可以从网络(250)接收另一终端的已编码的视频数据，对已编码的数据进行解码，并且显示恢复的视频数据。单向数据传输在媒体服务应用等中可能是常见的。
[0030]图2示出了第二对终端(230，240)，其被提供来支持已编码视频的双向传输，所述双向传输可能例如在视频会议期间发生。对于双向数据传输，每个终端(230，240)可以对在
本地位置处采集的视频数据进行编码，以经由网络(本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种使用至少一个处理器重建当前网络抽象层(NAL)单元以进行视频解码的方法，所述方法包括：确定所述当前NAL单元为帧内随机存取图片(IRAP)NAL单元；确定紧接在所述当前NAL单元之前解码的先前NAL单元指示已编码视频序列(CVS)是否结束；基于确定所述先前NAL单元指示所述CVS结束，将所述当前NAL单元解码为来自瞬时解码器刷新(IDR)NAL单元或断链存取(BLA)NAL单元；以及基于确定所述先前NAL单元指示所述CVS未结束，将所述当前NAL单元解码为清洁随机存取(CRA)NAL单元；以及对解码的当前NAL单元进行重建。2.根据权利要求1所述的方法，还包括：基于所述当前NAL单元的头来确定将所述当前NAL单元解码为所述IDR NAL单元还是所述BLA NAL单元。3.根据权利要求1所述的方法，其中，所述当前NAL单元的NAL单元类型是IRAP NAL单元类型。4.根据权利要求1所述的方法，其中，所述先前NAL单元的NAL单元类型是CVS流结束(EOS)NAL单元类型。5.根据权利要求1所述的方法，其中，基于确定所述先前NAL单元指示所述CVS结束，所述方法还包括设置用于指示所述先前NAL单元指示所述CVS结束的第一标志。6.根据权利要求5所述的方法，其中，基于被设置的所述第一标志，所述方法还包括将与所述当前NAL单元相关联的前置图片处理为随机存取可解码前置(RADL)图片。7.根据权利要求5所述的方法，其中，基于在设置所述第一标志时所述当前NAL单元的NAL单元类型是CRA NAL单元类型，所述方法还包括设置用于指示所述当前NAL单元的NAL单元类型是CRA NAL单元类型的第二标志。8.根据权利要求7所述的方法，还包括：基于外部信号设置所述第二标志，以及设置与所述第二标志对应的第三标志。9.根据权利要求8所述的方法，其中，基于被设置的所述第三标志，丢弃与所述当前NAL单元相关联的随机存取跳过前置(RASL)图片而不解码所述RASL图片。10.根据权利要求7所述的方法，其中，基于被设置的所述第二标志，丢弃与所述当前NAL单元相关联的前置图片而不解码所述前置图片。11.一种用于重建当前网络抽象层(NAL)单元以进行视频解码的设备，所述设备包括：至少一个存储器，被配置成存储程序代码；以及至少一个处理器，被配置成读取所述程序代码并按照所述程序代码的指示操作，所述程序代码包括：第一确定代码，被配置成使所述至少一个处理器将所述当前NAL单元确定为帧内随机存取图片(IRAP)NAL单元；第二确定代码，被配置成使所述处理器确定紧接在所述当前NAL单元之前解码的先前NAL单元指示已编码视频序列(CVS)是否结束；第一解码代码，被配置成使所述至少一个处理器基于确定所述先前NAL单元指示所述CVS结束，将所述当前NAL单元解码为来自瞬时解码器刷新(IDR)NAL单...

【专利技术属性】
技术研发人员：崔秉斗，史蒂芬，
申请(专利权)人：腾讯美国有限责任公司，
类型：发明
国别省市：