采用已编码视频流中的子图片进行信号发送的用信号发送虚拟边界的方法技术

提供了一种用于编码视频数据的方法、计算机程序和计算机系统。接收视频数据，该视频数据包括具有一个或多个虚拟边界的一个或多个子图片。在与所接收的视频数据相关联的图片参数集、图片报头或切片报头中，用信号发送对应于虚拟边界的信息。基于对应于虚拟边界的用信号发送的信息，对视频数据进行解码。对视频数据进行解码。

【技术实现步骤摘要】
【国外来华专利技术】采用已编码视频流中的子图片进行信号发送的用信号发送虚拟边界的方法
相关申请的交叉引用
[0001]本申请要求于2020年3月31日向美国专利商标局提交的美国临时专利申请第63/003,148号以及于2020年11月11日向美国专利商标局提交的美国专利申请第17/095,366号的优先权，这些申请额全部内容通过引用并入本文。


[0002]本公开总体上涉及数据处理领域，更具体地，涉及视频编码和解码。

技术介绍

[0003]使用具有运动补偿的帧间图片预测或帧内图片预测来进行视频编码和解码，已为人所知数十年。未压缩的数字视频可包括一系列图片，每个图片具有例如1920
×
1080亮度样本及相关联的色度样本的空间维度。该一系列图片可具有固定的或可变的图片速率(也非正式地称为帧率)，例如每秒60幅图片或60赫兹(Hz)。未压缩的视频具有很高的比特率要求。例如，在每样本8比特下，1080p60 4：2：0的视频(在60Hz帧率下具有1920
×
1080亮度样本分辨率)需要接近1.5Gbit/s的带宽。一小时的此类视频可能需要600GB以上的存储空间。
[0004]视频编码和解码的一个目的可以是通过压缩来减少输入视频信号中的冗余。压缩可有助于减小上述带宽或存储空间需求，在某些情况下可减小两个数量级或大于两个数量级。可采用无损压缩和有损压缩以及它们的组合。无损压缩是指可从压缩的原始信号中重建原始信号的精确副本的技术。当使用有损压缩时，重建的信号可能与原始信号不同，但是原始信号和重建的信号之间的失真足够小，以使重建的信号可用于预期应用。在视频的情况下，广泛使用有损压缩。可容忍的失真量取决于应用；例如某些消费流式应用的用户相比电视贡献应用(television contribution application)的用户来说可容忍更高的失真。可实现的压缩率可反映：更高的可允许/可容许的失真可产生更高的压缩率。
[0005]视频编码器和解码器可以利用来自几个广泛类别的技术，包括例如，运动补偿、变换、量化和熵编码，下面将介绍其中的一些。
[0006]历史上，视频编码器和解码器倾向于在给定的图片尺寸上操作，在大多数情况下，该图片尺度针对已编码视频序列(coded video sequence，CVS)、图片组(Group of Pictures，GOP)或类似的多图片时间帧进行限定且保持不变。例如，在MPEG
‑
2中，已知的是系统设计会根据场景活动等因素改变水平分辨率(并且从而改变图片尺寸)，但仅在I图片上如此，因此典型地所针对的是GOP。在例如ITU
‑
T建议书H.263的附件P(ITU
‑
T Rec.H.263Annex P)中，对参考图片进行重新采样以用于CVS中不同的分辨率是已知的。然而，在该附件中，图片尺寸没有改变，只对对参考图片进行了重新采样，潜在地导致只有部分图片画布(picture canvas)被使用(在下采样的情况下)，或者只有部分场景被捕获(在上采样的情况下)。进一步，H.263的附件Q允许以因子2(在每个维度上)对单独的宏块进行向上或向下重新采样。同样，图片尺寸保持不变。宏块的尺寸在H.263中是固定的，因此不需
要用信号发送。
[0007]预测图片中图片尺寸的改变在现代视频编码中变得更加主流。例如，VP9允许对整个图片进行参考图片重新采样以及改变分辨率。类似地，针对VVC制定的某些提议(包括，例如，亨德利(Hendry)等人，“关于VVC的自适应分辨率改变(On adaptive resolution change(ARC)for VVC)”，联合视频小组文件JVET
‑
M0135
‑
v1，2019年1月9日至19日，其全部内容通过引用并入本文)允许对整个参考图片进行重新采样以达到不同的——更高的或更低的——分辨率。在上述文件中，所建议的是不同的候选分辨率被编码在序列参数集中，并被图片参数集中的每个图片语法元素所引用。

技术实现思路

[0008]实施例涉及用于编码视频数据的方法、系统和计算机可读介质。根据一个方面，提供了一种用于编码视频数据的方法。该方法可以包括：接收视频数据，所述视频数据包括具有一个或多个虚拟边界的一个或多个子图片；在与所接收的视频数据相关联的图片参数集、图片报头或切片报头中，用信号发送对应于虚拟边界的信息；基于对应于虚拟边界的用信号发送的信息，对视频数据进行解码。
[0009]根据另一个方面，提供了一种用于编码视频数据的计算机系统。所述计算机系统可以包括一个或多个处理器、一个或多个计算机可读存储器、一个或多个计算机可读有形存储设备以及存储在所述一个或多个存储设备中的由所述一个或多个处理器中的至少一个经由所述一个或多个存储器中的至少一个执行的程序指令，由此所述计算机系统能够执行方法。该方法可以包括：接收视频数据，所述视频数据包括具有一个或多个虚拟边界的一个或多个子图片；在与所接收的视频数据相关联的图片参数集、图片报头或切片报头中，用信号发送对应于虚拟边界的信息；基于对应于虚拟边界的用信号发送的信息，对视频数据进行解码。
[0010]根据又一个方面，提供了一种用于编码视频数据的计算机可读介质。所述计算机可读介质可以包括一个或多个计算机可读存储设备和存储在所述一个或多个有形存储设备中的程序指令，所述程序指令能够由处理器执行。程序指令能够由处理器执行以执行方法，所述方法可以相应地包括：接收视频数据，所述视频数据包括具有一个或多个虚拟边界的一个或多个子图片；在与所接收的视频数据相关联的图片参数集、图片报头或切片报头中，用信号发送对应于虚拟边界的信息；基于对应于虚拟边界的用信号发送的信息，对视频数据进行解码。
附图说明
[0011]根据下面结合附图的说明性实施例的详细描述，这些及其他的目的、特征和优点将变得显而易见。附图的各种特征不是按比例的，因为附图是为了便于本领域技术人员结合详细描述进行清晰的理解。在附图中：
[0012]图1是根据实施例的通信系统的简化框图的示意图。
[0013]图2是根据实施例的通信系统的简化框图的示意图。
[0014]图3是根据实施例的解码器的简化框图的示意图。
[0015]图4是根据实施例的编码器的简化框图的示意图。
[0016]图5是根据指示的现有技术或实施例的用于用信号发送ARC参数的选项的示意图。
[0017]图6是根据实施例的语法表的示例。
[0018]图7是根据实施例的计算机系统的示意图。
[0019]图8是具有自适应分辨率变化的用于可伸缩性的预测结构的示例。
[0020]图9是根据实施例的语法表的示例。
[0021]图10是解析和解码每个访问单元的poc周期和访问单元计计数值的简化框图的示意图。
[0022]图11是包括多层子图片的视频码流结构的示意图。
[0023]图12是具有增强分辨率本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种用于编码视频数据的方法，能够由处理器执行，所述方法包括：接收视频数据，所述视频数据包括具有一个或多个虚拟边界的一个或多个子图片；在与接收的视频数据相关联的图片参数集、图片报头或切片报头中，用信号发送对应于所述虚拟边界的信息；以及基于对应于所述虚拟边界的用信号发送的信息，对所述视频数据进行解码。2.根据权利要求1所述的方法，其中，基于检测到的虚拟边界，禁止跨越所述虚拟边界进行环内滤波。3.根据权利要求2所述的方法，其中，所述环内滤波包括解块滤波器、采样自适应偏移滤波器和自适应环路滤波器中的一个或多个。4.根据权利要求1所述的方法，进一步包括：重组所述一个或多个子图片，以及在图片水平上更新对应于所述虚拟边界的信息。5.根据权利要求1所述的方法，其中，在序列参数集中用信号发送对应于所述虚拟边界的信息。6.根据权利要求1所述的方法，其中，两个垂直边界之间的距离被指定为大于或等于对应于亮度样本的尺寸，所述亮度样本与所述接收的视频数据相关联。7.根据权利要求1所述的方法，其中，当没有在序列参数集中用信号发送时，对应于所述虚拟边界的信息是图片参数集。8.一种用于编码视频数据的计算机系统，所述计算机系统包括：一个或多个计算机可读非暂时性存储介质，被配置为存储计算机程序代码；以及一个或多个计算机处理器，被配置为访问所述计算机程序代码并按照所述计算机程序代码的指示操作，所述计算机程序代码包括：接收代码，被配置为使所述一个或多个计算机处理器接收视频数据，所述视频数据包括具有一个或多个虚拟边界的一个或多个子图片；信令代码，被配置为使所述一个或多个计算机处理器在与接收的视频数据相关联的图片参数集、图片报头或切片报头中，用信号发送对应于所述虚拟边界的信息；以及解码代码，被配置为使所述一个或多个计算机处理器基于对应于所述虚拟边界的所述用信号发送的信息，对所述视频数据进行解码。9.根据权利要求8所述的计算机系统，其中，基于检测到的虚拟边界，禁止跨越所述虚拟边界进行环内滤波。10.根据权利要求9所述的计算机系统，其中，所述环内滤波包...

【专利技术属性】
技术研发人员：崔秉斗，刘杉，史蒂芬，
申请(专利权)人：腾讯美国有限责任公司，
类型：发明
国别省市：