用于点云编码的方法及装置制造方法及图纸

在点云解码器中的点云几何解码的方法中，从包括点集的点云的编码比特流接收点集中的点的色度预测残差信息。色度预测残差信息包括Cb分量和Cr分量。此外，通过处理电路从点云的编码比特流确定色度预测残差信息的Cb分量和Cr分量之间的相关性类型。基于色度预测残差信息的Cb分量和Cr分量之间的相关性类型，对色度预测残差信息进行解码。预测残差信息进行解码。预测残差信息进行解码。

【技术实现步骤摘要】
【国外来华专利技术】用于点云编码的方法及装置
[0001]援引并入
[0002]本申请要求于2021年3月24日提交的美国专利申请No.17/211,536、题为“用于点云编码的方法及装置”的优先权，该美国专利申请要求于2020年4月17日提交的美国临时申请No.63/011,913、题为“用于点云属性的联合色度信道编码的方法及装置”的优先权。这些在先申请的公开内容通过引用整体并入本文中。


[0003]本公开描述了总体上与点云编码有关的实施例。

技术介绍

[0004]本文所提供的背景描述是出于总体上呈现本公开的内容的目的。在该背景部分中描述的范围内，目前命名的专利技术人的作品以及提交之时不可另行具备现有技术资格的本描述的各个方面既未明确亦未默示地承认为本公开的现有技术。
[0005]开发了各种技术来捕获和表示世界，例如，世界中的对象、世界中的环境及三维(3D，3
‑
dimensional)空间中的类似物。世界的3D表示可以实现更沉浸式的交互和交流形式。点云可以用作世界的3D表示。点云是3D空间中的点集，每个点都具有相关联的属性，例如颜色、材料属性，纹理信息、强度属性、反射率属性、运动相关属性、模态属性和/或其他各种属性。这样的点云可包括大量数据，并且此类点云的存储和传输成本高且耗时。

技术实现思路

[0006]本公开的各方面提供了用于处理点云数据的方法和装置。根据本公开的一方面，提供了一种在点云解码器中的点云几何解码的方法。在该方法中，可以从包括点集的点云的编码比特流接收点集中的点的色度预测残差信息。色度预测残差信息可以包括Cb分量和Cr分量。此外，可以通过处理电路从点云的编码比特流确定色度预测残差信息的Cb分量和Cr分量的相关性类型。可以基于色度预测残差信息的Cb分量和Cr分量的相关性类型对色度预测残差信息进行解码。
[0007]在一个示例中，为了对色度预测残差信息进行解码，可以基于Cb分量和Cr分量的相关性类型为正，对色度预测残差信息的Cb分量和色度预测残差信息的Cb分量减去Cr分量进行解码。
[0008]在另一示例中，为了对色度预测残差信息进行解码，可以基于Cb分量和Cr分量的相关性类型为负，对色度预测残差信息的Cb分量和色度预测残差信息的Cb分量加上Cr分量进行解码。
[0009]在又一示例中，为了对色度预测残差信息进行解码，可以基于Cb分量和Cr分量之间不存在相关性，对色度预测残差信息的Cb分量和色度预测残差信息的Cr分量进行解码。
[0010]在一些实施例中，可以基于来自编码区域、在先细节级别(LOD)和与点正相关的N个最邻近点之一的第一数量残差点，确定色度预测残差信息的Cb分量和Cr分量之间的相关
性类型为正。在一些实施例中，可以基于来自编码区域、在先LOD和与点负相关的N个最邻近点之一的的第二数量残差点，确定色度预测残差信息的Cb分量和Cr分量之间的相关性类型为负。
[0011]在一些实施例中，编码区域可包括以下至少之一：帧、视频序列、图片组(GOP，group of pictures)、图片、切片和瓦片。
[0012]在一些实施例中，N可以是等于3或4的正整数。
[0013]在该方法中，编码比特流还可以包括指示色度预测残差信息的Cb分量和Cr分量之间的相关性类型的信令信息。在一个示例中，信令信息可以基于来自编码区域、在先LOD、点所属的LOD和与点正相关的N个最邻近点之一的第一数量残差点，指示色度预测残差信息的Cb分量和Cr分量的相关性类型为正。在另一示例中，信令信息可以基于来自编码区域、在先LOD、点所属的LOD和与点负相关的N个最邻近点之一的第二数量残差点，指示色度预测残差信息的所述Cb分量和Cr分量的相关性类型为负。
[0014]根据本公开的一方面，提供了一种在点云解码器中的点云几何解码的方法。在该方法中，可以从包括点集的点云的编码比特流接收第一信令信息。第一信令信息可以指示基于点集中的点的第一色度预测残差信息和第二色度预测残差信息的相关性类型，对第一色度预测残差信息和第二色度预测残差信息进行解码。编码比特流可以包括第一色度预测残差信息和第二色度预测残差信息。可以基于第一信令信息确定第一色度预测残差信息与第二色度预测残差信息之间的相关性类型。此外，可以基于第一色度预测残差信息、第二色度预测残差信息以及第一色度预测残差信息与第二色度预测残差信息之间的相关性类型，对第一色度信息和第二色度信息进行重建。
[0015]在一些实施例中，可以基于第一信令信息为第一值来确定第二信令信息。第二信令信息可以指示第一色度预测残差信息与第二色度预测残差信息之间的相关性类型由第三信令信息确定。可以基于第二信令信息为第一值来确定第三信令信息。可以基于第三信令信息确定第一色度预测残差信息与第二色度预测残差信息之间的相关性类型。
[0016]在一个示例中，可以基于第三信令信息为第一值，确定第一色度预测残差信息与第二色度预测残差信息之间的相关性类型为负。在另一示例中，可以基于第三信令信息为第二值，确定第一色度预测残差信息与第二色度预测残差信息之间的相关性类型为正。
[0017]在该方法中，可以通过对第一色度预测残差信息执行第一逆量化处理来重建第一色度信息。此外，响应于第一信令信息为第一值，可以对第二色度信息进行重建，第二色度信息包括第一部分和第二部分。可以通过对第二色度预测残差信息执行第二逆量化处理来获得第一部分，以及可通过将所重建的第一色度信息以及第一色度预测残差信息和第二色度预测残差信息之间的相关性类型相乘来获得第二部分。
[0018]在一些实施例中，可以通过对第一色度预测残差信息执行第一逆量化处理来重建第一色度信息。响应于所述第一信令信息为第二值，可以通过对第二色度预测残差信息执行第二逆量化处理来重建第二色度信息。
[0019]在一些实施例中，第一色度预测残差信息和第二色度预测残差信息可以以具有零偏移的一阶关系相关。
[0020]在一些示例中，用于处理点云数据的装置包括接收电路和处理电路，该接收电路和处理电路被配置为执行上述方法中的一个或多个。
附图说明
[0021]通过以下详细描述和附图，所公开主题的其他特征、性质和各种优点将更加明显，在附图中：
[0022]图1是根据实施例的通信系统的简化框图的示意图。
[0023]图2是根据实施例的流式系统的简化框图的示意图。；
[0024]图3示出了根据一些实施例的用于对点云帧进行编码的编码器的框图。
[0025]图4示出了根据一些实施例的用于对与点云帧对应的压缩比特流进行解码的解码器的框图。
[0026]图5是根据实施例的视频解码器的简化框图的示意图。
[0027]图6是根据实施例的视频解码器的简化框图的示意图。
[0028]图7示出了根据一些实施例的用于对与点云帧对应的压缩比特流进行解码的解码器的框图。
[0029]图8示出了根据一些实施例的用于对点云帧进行编码的编码器的框图本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种用于点云解码器中的点云几何解码的方法，包括：从包括点集的点云的编码比特流接收所述点集中的点的色度预测残差信息，所述色度预测残差信息包括Cb分量和Cr分量；通过处理电路从所述点云的编码比特流，确定所述色度预测残差信息的所述Cb分量和所述Cr分量之间的相关性类型；以及基于所述色度预测残差信息的所述Cb分量和所述Cr分量之间的相关性类型，对所述色度预测残差信息进行解码。2.根据权利要求1所述的方法，其中，所述解码包括：基于所述Cb分量和所述Cr分量之间的相关性类型为正，对所述色度预测残差信息的所述Cb分量和所述色度预测残差信息的所述Cb分量减去所述Cr分量进行解码。3.根据权利要求1所述的方法，其中，所述解码包括：基于所述Cb分量和所述Cr分量之间的相关性类型为负，对所述色度预测残差信息的所述Cb分量和所述色度预测残差信息的所述Cb分量加上所述Cr分量进行解码。4.根据权利要求1所述的方法，其中，所述解码包括：基于所述Cb分量和所述Cr分量之间不存在相关性，对所述色度预测残差信息的所述Cb分量和所述色度预测残差信息的所述Cr分量进行解码。5.根据权利要求1所述的方法，其中，所述确定包括：基于来自编码区域、在先细节级别LOD和与所述点正相关的N个最邻近点之一的第一数量残差点，确定所述色度预测残差信息的所述Cb分量和所述Cr分量之间的相关性类型为正；以及基于来自所述编码区域、所述在先LOD和与所述点负相关的N个最邻近点之一的第二数量残差点，确定所述色度预测残差信息的所述Cb分量和所述Cr分量之间的相关性类型为负。6.根据权利要求5所述的方法，其中，所述编码区域包括以下至少之一：帧、视频序列、图片组GOP、图片、切片和瓦片。7.根据权利要求5所述的方法，其中，所述N为等于3或4的正整数。8.根据权利要求1所述的方法，其中，所述编码比特流包括指示所述色度预测残差信息的所述Cb分量和所述Cr分量之间的相关性类型的信令信息，基于来自编码区域、在先LOD、所述点所属的LOD和与所述点正相关的N个最邻近点之一的第一数量残差点，所述信令信息指示所述色度预测残差信息的所述Cb分量和所述Cr分量之间的相关性类型为正；以及基于来自所述编码区域、所述在先LOD、所述点所属的LOD和与所述点负相关的N个最邻近点之一的第二数量残差点，所述信令信息指示所述色度预测残差信息的所述Cb分量和所述Cr分量之间的相关性类型为负。9.一种用于点云解码器中的点云几何解码的方法，包括：从包括点集的点云的编码比特流接收第一信令信息，所述第一信令信息指示基于所述点集中的点的第一色度预测残差信息和第二色度预测残差信息之间的相关性类型，对所述第一色度预测残差信息和所述第二色度预测残差信息进行解码，所述编码比特流包括所述
第一色度预测残差信息和所述第二色度预测残差信息；基于所述第一信令信息确定所述第一色度预测残差信息与所述第二色度预测残差信息之间的相关性类型；以及基于所述第一色度预测残差信息、所述第二色度预测残差信息以及所述第一色度预测残差信息与第二色度预测残差信息之间的相关性类型，重建第一色度信息和第二色度信息。10.根据权利要求9所述的方法，其中，所述确定还包括：基于所述第一信令信息为第一值确定第二信令信息，所述第二信令信息指示所述第一色度预测残差信息与所述第二色度预测残差信息之间的相关性类型由第三信令信息指示；基于所述第二信令信息为所述第一值确定所述第三信令信息，所述第三信令信息指示所述第一色度预测残差信息和所述第二色度预测残差信息之间的相关性类型；以及基于所述第三信令信息确定所述第一色度预测残差信息与所述第二色...

【专利技术属性】
技术研发人员：芮世薰，高文，刘杉，
申请(专利权)人：腾讯美国有限责任公司，
类型：发明
国别省市：