图像数据编码/解码方法、介质和发送比特流的方法技术

公开了一种图像数据编码/解码方法、计算机可读记录介质和发送比特流的方法。接收编码有360度图像的比特流，比特流包括扩展二维图像的数据，扩展二维图像包括二维图像和预定的扩展区域，并且二维图像是从具有三维投影结构并且包括至少一个面的图像投影的；以及通过对扩展二维图像的数据进行解码来重构扩展二维图像，其中，扩展区域的尺寸是基于指示扩展区域的尺寸的尺寸信息来确定的，尺寸信息是从比特流中获得的，其中，扩展区域的样本值是根据从多个填充方法中选择的填充方法来不同地确定的，并且扩展二维图像是否包括扩展区域是基于比特流中包括的信息来确定的。于比特流中包括的信息来确定的。于比特流中包括的信息来确定的。

【技术实现步骤摘要】
图像数据编码/解码方法、介质和发送比特流的方法
[0001]本申请是申请日为2017年10月10日、申请号为201780073663.8、专利技术名称为“图像数据编码/解码方法和装置”的专利技术专利申请的分案申请。


[0002]本专利技术涉及图像数据编码和解码技术，并且更具体地，涉及用于对现实媒体服务的360度图像进行编码和解码的方法和装置。

技术介绍

[0003]随着互联网和移动终端的普及以及信息和通信技术的发展，多媒体数据的使用正在迅速增加。近来，在各种领域中出现了对诸如高清晰度(HD)图像和超高清晰度(UHD)图像的高质量图像和高分辨率图像的需求，并且对诸如虚拟现实、增强现实等的现实媒体服务的需求也正在迅速增加。具体地，由于用多个摄像装置捕获的多视图图像被处理用于虚拟现实和增强现实的360度图像，因此针对处理生成的数据量大量增加，但是图像处理系统的用于处理大量数据的性能不足。
[0004]如上所述，在现有技术的图像编码和解码方法和装置中，需要改进图像处理方面的性能，特别是图像编码/解码方面的性能。

技术实现思路

[0005]技术问题
[0006]本专利技术的目的是提供一种用于改进用于编码和解码的初始步骤中的图像设置处理的方法。更具体地，本专利技术旨在提供一种用于在考虑360度图像的特性的情况下改进图像设置处理的编码和解码方法和装置。
[0007]技术解决方案
[0008]根据本专利技术的一方面，提供了一种对360度图像进行解码的方法。
[0009]此处，对360度图像进行解码的方法可以包括：接收包括编码的360度图像的比特流；参考从所接收到的比特流获取的语法信息来生成预测图像；通过将所生成预测图像与通过对比特流进行逆量化和逆变换所获取的残差图像进行组合来获取解码图像；以及根据投影格式将解码图像重构成360度图像。
[0010]此处，语法信息可以包括360度图像的投影格式信息。
[0011]此处，投影格式信息可以是指示以下中至少之一的信息：360度图像被投影到2D平面中的等矩形投影(ERP，Equi
‑
Rectangular Projection)格式；360度图像投影被投影到立方体的立方体映射投影(CMP，CubeMap Projection)格式；360度图像投影到八面体的八面体投影(OHP，OctaHedron Projection)格式；以及360度图像被投影到多面体的二十面体投影(ISP，IcoSahedral Projection)格式。
[0012]此处，重构可以包括：参考语法信息根据区域式打包来获取排列信息；以及根据排列信息来重排解码图像的块。
[0013]此处，预测图像的生成可以包括：对通过恢复比特流获取的参考图片执行图像扩展；以及参考被执行图像扩展的参考图片来生成预测图像。
[0014]此处，执行图像扩展可以包括：基于参考图片的划分单元来执行图像扩展。
[0015]此处，基于划分单元来执行图像扩展可以包括：通过使用划分单元的参考像素针对每个划分单元单独地生成扩展区域。
[0016]此处，可以使用与要扩展的划分单元在空间上相邻的划分单元的边界像素或使用与要扩展的划分单元具有图像连续性的划分单元的边界像素来生成扩展区域。
[0017]此处，基于划分单元来执行图像扩展可以包括：使用组合有划分单元中的在空间上彼此相邻的两个或更多个划分单元的区域的边界像素，来生成组合区域的扩展图像。
[0018]此处，基于划分单元来执行图像扩展可以包括：使用划分单元中的在空间上彼此相邻的划分单元的所有相邻像素信息，生成相邻划分单元之间的扩展区域。
[0019]此处，基于划分单元来执行图像扩展可以包括：使用在空间上相邻的划分单元的相邻像素的平均值来生成扩展区域。
[0020]此处，预测图像的生成可以包括：从语法信息中包括的运动信息中获取运动矢量候选组，该运动矢量候选组包括与要解码的当前块相邻的块的运动矢量；基于从运动信息中提取的选择信息，从运动矢量候选组导出预测运动矢量；以及通过使用通过将预测运动矢量与从运动信息中提取的差分运动矢量相加而导出的最终运动矢量来确定要解码的当前块的预测块。
[0021]此处，运动矢量候选组可以在与当前块相邻的块与当前块所属的面不同的情况下仅包括相邻块中的以下块的运动矢量，该块属于与当前块所属的面具有图像连续性的面。
[0022]此处，与当前块相邻的块可以指的是在选自以下中的至少一个方向上与当前块相邻的块：左上、上、右上、下和左下。
[0023]此处，最终运动矢量可以基于当前块指示包括在至少一个参考图片内并且被设置在根据投影格式具有面之间的图像连续性的区域中的参考区域。
[0024]此处，可以根据投影格式基于图像连续性在向上、向下、向左和向右方向上扩展参考图片，然后可以设置参考区域。
[0025]此处，可以面为单元扩展参考图片，并且可以跨越面边界设置参考区域。
[0026]此处，运动信息可以包括参考图片所属的参考图片列表、参考图片的索引和指示参考区域的运动矢量中至少之一。
[0027]此处，当前块的预测块的生成可以包括：将当前块划分成多个子块，并且针对由划分产生的多个子块中的每个子块生成预测块。
[0028]根据本专利技术的另一方面，提供了一种对360度图像进行解码的方法。该方法可以包括：接收编码有该360度图像的比特流，该比特流包括扩展二维图像的数据，该扩展二维图像包括二维图像和预定的扩展区域，并且该二维图像是从具有三维投影结构并且包括至少一个面的图像投影的；以及通过对该扩展二维图像的数据进行解码来重构该扩展二维图像，其中，该扩展区域的尺寸是基于指示该扩展区域的宽度的宽度信息确定的，该宽度信息是从该比特流中获得的，并且其中，该扩展区域的样本值是根据从多个填充方法中选择的填充方法来不同地确定的。
[0029]根据本专利技术的另一方面，提供了一种对360度图像进行编码的方法。该方法可以包
括：获得从具有三维投影结构并且包括至少一个面的图像投影的二维图像；获得包括该二维图像和预定的扩展区域的扩展二维图像；以及将该扩展二维图像的数据编码到编码有该360度图像的比特流中，其中，该扩展区域的尺寸是基于指示该扩展区域的宽度的宽度信息编码的，该宽度信息被编码到该比特流中，并且其中，该扩展区域的样本值是根据从多个填充方法中选择的填充方法来不同地确定的。
[0030]根据本专利技术的另一方面，提供了一种存储比特流的非暂时性计算机可读记录介质，该比特流由用于对360度图像进行编码的方法产生，该方法可以包括：获得从具有三维投影结构并且包括至少一个面的图像投影的二维图像；获得包括该二维图像和预定的扩展区域的扩展二维图像；以及将该扩展二维图像的数据编码到编码有该360度图像的比特流中，其中，该扩展区域的尺寸是基于指示该扩展区域的宽度的宽度信息编码的，该宽度信息被编码到该比特流中，并且其中，该扩展区域的样本值是根据从多个填充方法中选择本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种对360度图像进行解码的方法，所述方法包括：接收编码有所述360度图像的比特流，所述比特流包括扩展二维图像的数据，所述扩展二维图像包括二维图像和预定的扩展区域，并且所述二维图像是从具有三维投影结构并且包括至少一个面的图像投影的；以及通过对所述扩展二维图像的数据进行解码来重构所述扩展二维图像，其中，所述扩展区域的尺寸是基于指示所述扩展区域的尺寸的尺寸信息来确定的，所述尺寸信息是从所述比特流中获得的，其中，所述扩展区域的样本值是根据从多个填充方法中选择的填充方法来不同地确定的，并且所述扩展二维图像是否包括所述扩展区域是基于所述比特流中包括的信息来确定的。2.根据权利要求1所述的方法，其中，所述填充方法是基于从所述比特流中获得的选择信息来从所述多个填充方法中选择的。3.根据权利要求1所述的方法，其中，所述多个填充方法至少包括第一填充方法，所述第一填充方法复制所述面的边界样本的样本值用于所述扩展区域的样本值。4.根据权利要求1所述的方法，其中，所述多个填充方法包括其中所述扩展区域的图像特性从所述面的图像特性改变的填充方法。5.根据权利要求1所述的方法，其中，所述多个填充方法包括其中所述扩展区域的图像特性与所述面的图像特性相同的填充方法。6.根据权利要求1所述的方法，其中，所述填充方法是针对所述一个或多个面中的每个面独立地选择的。7.根据权利要求1所述的方法，其中，所述三维投影结构是第一三维投影结构和第二三维投影结构之中的至少一个。8.根据权利要求7所述的方法，其中，在所述第一三维投影结构的情况下，关于所述扩展区域的尺寸的所述尺寸信息包括所述二维图像的左侧的左扩展区域的第一宽度信息以及所述二维图像的右侧的右扩展区域的第二宽度信息。9.根据权利要求7所述的方法，其中，在所述第二三维投影结构的情况下，关于所述扩展区域的尺寸的所述尺寸信息包括所述二维图像的左侧的左扩展区域的第一宽度信息、所述二维图像的右侧的右扩展区域的第二宽度信息、所述二维图像上方的顶部扩展区域的第一高度信息以及所...

【专利技术属性】
技术研发人员：金起佰，
申请(专利权)人：有限公司B一影像技术研究所，
类型：发明
国别省市：