图像处理设备和图像处理方法技术

本发明专利技术涉及图像处理设备和图像处理方法。提供一种图像处理设备，包括解码部件，所述解码部件被配置成从编码流中解码图像，水平滤波部件，所述水平滤波部件被配置成将去块滤波器应用于在将由解码部件解码的图像内的垂直块边界，垂直滤波部件，所述垂直滤波部件被配置成将去块滤波器应用于在将由解码部件解码的图像内的水平块边界，和控制部件，所述控制部件被配置成使水平滤波部件并行地滤波包括在包含多个编码单位的处理单位中的多个垂直块边界，和使垂直滤波部件并行地滤波包括在所述处理单位中的多个水平块边界。

Image processing apparatus and image processing method

The invention relates to an image processing apparatus and an image processing method. To provide an image processing apparatus includes a decoding section the decoding section is configured to decode image from the encoding stream, the level of filtering components to the horizontal filtering section is configured to deblocking filter used in the vertical block boundary image by decoding the decoding part, vertical filtering components, the vertical the filtering device is configured to be the deblocking filter used in the image by decoding part decoding level within the block boundary, and the control unit, the control unit is configured so that the level of filtering components included in the parallel filtering processing unit comprises a plurality of coding units in a number of vertical block boundaries, and so vertical filtering components in parallel filter includes a plurality of levels in the processing units in the block boundary.

【技术实现步骤摘要】
图像处理设备和图像处理方法本申请是同一申请人的申请日为2011年12月2日的、申请号为201180057796.9(PCT/JP2011/077954)、专利技术名称为“图像处理设备和图像处理方法”的中国专利技术专利申请的分案申请。
本公开涉及图像处理设备和图像处理方法。
技术介绍
H.264/AVC(图像编码方案的标准规范之一)，以均包含4×4像素的块为单位，将去块滤波器应用于块边界，以便避免在编码图像的时候，由块失真引起的图像质量降低。去块滤波器需要大量的处理，可能占到图像解码中的总处理量的50％。高效视频编码(HEVC)(下一代图像编码方案)的标准化工作提出按照JCTVC-A119(参见非专利文献1)，以均包含8×8像素或者更多像素的块为单位，应用去块滤波器。在JCTVC-A119中提出的技术把块大小增大到允许应用去块滤波器的最小单位，以便对一个宏块内的相同方向的块边界，并行地进行滤波处理。引文列表非专利文献非专利文献1：K.Ugur(Nokia)，K.R.Andersson(LMEricsson)，A.Fuldseth(TandbergTelecom)，“JCTVC-A119:VideocodingtechnologyproposalbyTandberg,Nokia,andEricsson”，DocumentsofthefirstmeetingoftheJointCollaborativeTeamonVideoCoding(JCT-VC),Dresden,Germany,15-23April,2010。
技术实现思路
即使使用在JCTVC-A119中提出的技术，在对垂直块边界的处理和对水平块边界的处理之间仍然存在依存关系。具体地说，对一个宏块的垂直边界的处理要等到进行对邻近宏块的水平边界的处理为止。对一个宏块的水平边界的处理要等到进行对相同宏块的垂直边界的处理为止。上述技术只能程度非常有限地提供去块滤波器的并行处理。因而，上述技术不能成功解决由在应用去块滤波器时的较大处理量引起的延迟和数据速率的降低的问题。按照本公开的技术目的在于提供一种能够在应用去块滤波器时，提供进一步的并行处理的图像处理设备和图像处理方法。按照本公开的实施例，提供一种图像处理设备，包括解码部分，所述解码部分被配置成从编码流中解码图像，水平滤波部件，所述水平滤波部件被配置成将去块滤波器应用于在将由解码部分解码的图像内的垂直块边界，垂直滤波部件，所述垂直滤波部件被配置成将去块滤波器应用于在将由解码部分解码的图像内的水平块边界，和控制部分，所述控制部分被配置成使水平滤波部件并行地滤波包括在包含多个编码单位的处理单位中的多个垂直块边界，和使垂直滤波部件并行地滤波包括在所述处理单位中的多个水平块边界。典型地，该图像处理设备可被实现成对图像解码的图像解码设备。按照本公开的实施例，提供一种图像处理方法，包括从编码流中解码图像，进行水平滤波，以把去块滤波器应用于在待解码的图像内的垂直块边界，进行垂直滤波，以把去块滤波器应用于在待解码的图像内的水平块边界，和控制水平滤波和垂直滤波，以致并行地滤波包括在包含多个编码单位的处理单位中的多个垂直块边界，和并行地滤波包括在所述处理单位中的多个水平块边界。按照本公开的实施例，提供一种图像处理设备，包括水平滤波部件，所述水平滤波部件被配置成当编码待编码图像时，把去块滤波器应用于在要局部解码的图像内的垂直块边界，垂直滤波部件，所述垂直滤波部件被配置成把去块滤波器应用于所述图像内的水平块边界，控制部分，所述控制部分被配置成使水平滤波部件并行地滤波包括在包含多个编码单位的处理单位中的多个垂直块边界，和使垂直滤波部件并行地滤波包括在所述处理单位中的多个水平块边界，和编码部件，所述编码部件被配置成利用由水平滤波部件和垂直滤波部件滤波的图像，编码所述待编码图像。典型地，该图像处理设备可被实现成对图像编码的图像编码设备。按照本公开的实施例，提供一种图像处理方法，包括进行水平滤波，以便当编码待编码图像时，把去块滤波器应用于在要局部解码的图像内的垂直块边界，进行垂直滤波，以便把去块滤波器应用于所述图像内的水平块边界，控制水平滤波和垂直滤波，以便并行地滤波包括在包含多个编码单位的处理单位中的多个垂直块边界，和并行地滤波包括在所述处理单位中的多个水平块边界，和利用借助水平滤波和垂直滤波所滤波的图像，编码所述待编码图像。如上所述，按照本公开的图像处理设备和图像处理方法还改善应用去块滤波器时的并行处理。附图说明图1是表示按照实施例的图像编码设备的结构的例子的方框图。图2是表示按照实施例的图像解码设备的结构的例子的方框图。图3是表示边界周围的邻近像素的例子的说明图。图4是图解说明按照现有技术的滤波需要判定处理期间的参考像素的说明图。图5是图解说明利用滤波处理更新的像素的说明图。图6是图解说明用于说明实施例的边缘的标识的说明图。图7是图解说明按照现有技术的并行处理的说明图。图8是图解说明按照现有技术的处理之间的依存关系的第一说明图。图9是图解说明按照现有技术的处理之间的依存关系的第二说明图。图10是图解说明按照现有技术的处理序列的说明图。图11是图解说明按照第一示例的处理序列的说明图。图12是图解说明按照第一实施例的去块滤波器的详细结构的方框图。图13是图解说明判定部分的详细结构的方框图。图14是图解说明切片边界周围的邻近块的说明图。图15是图解说明每个切片的处理序列的第一个例子的说明图。图16是图解说明每个切片的处理序列的第二个例子的说明图。图17是图解说明由变形例提供的判定技术的第一个和第二个例子的说明图。图18是图解说明由变形例提供的判定技术的第三个和第四个例子的说明图。图19是图解说明由变形例提供的判定技术的第五个和第六个例子的说明图。图20是图解说明按照第一示例的去块滤波器的处理流程的流程图。图21是图解说明滤波需要判定处理的流程的流程图。图22是图解说明按照第二示例的处理序列的说明图。图23是图解说明按照第二示例的去块滤波器的详细结构的方框图。图24是图解说明按照第二示例的去块滤波器的处理流程的流程图。图25是图解说明每个CLU的处理序列的说明图。图26是图解说明每个LCU的处理流程的流程图。图27是图解说明第三示例的概况的说明图。图28是图解说明按照第三示例的去块滤波器的详细结构的方框图。图29是图解说明加权平均值的权重的确定的说明图。图30是图解说明加权平均值的权重的例子的说明图。图31是图解说明按照第三示例的计算部分的输出像素值的说明图。图32是图解说明用于比较的处理序列的第一个例子的说明图。图33是图解说明由第三示例提供的处理序列的第一个例子的说明图。图34是图解说明用于比较的处理序列的第二个例子的说明图。图35是图解说明由第三示例提供的处理序列的第二个例子的说明图。图36是图解说明按照第三示例的去块滤波器的处理流程的第一个例子的流程图。图37是图解说明图36中所示的像素值计算处理的流程的流程图。图38是图解说明多视图编解码器的说明图。图39是图解说明按照实施例的应用于多视图编解码器的图像编码处理的说明图。图40是图解说明按照实施例的应用于多视图编解码器的图像解码处理的说明图。图41是图解说明可扩展编解码器的说本文档来自技高网...

【技术保护点】
一种图像处理装置，包括：水平滤波部，跨越多个垂直边界，以在针对多个所述垂直边界的水平方向的去块滤波器之间不存在与垂直方向的去块滤波器相伴的处理的依存关系的状态，应用所述水平方向的去块滤波器，所述垂直边界是编码时要被局部解码的图像内的块之间的垂直边界，所述水平方向的去块滤波器以位于所述垂直边界附近的像素为对象；垂直滤波部，跨越多个水平边界，应用垂直方向的去块滤波器，所述水平边界是包括通过所述水平滤波部被应用了所述水平方向的去块滤波器的像素的图像内的块之间的水平边界，所述垂直方向的去块滤波器以位于所述水平边界附近的像素为对象；以及编码部，使用通过所述垂直滤波部被应用了所述垂直方向的去块滤波器的图像，对图像进行编码。

【技术特征摘要】
2010.12.07 JP 2010-272907;2011.01.12 JP 2011-004391.一种图像处理装置，包括：水平滤波部，跨越多个垂直边界，以在针对多个所述垂直边界的水平方向的去块滤波器之间不存在与垂直方向的去块滤波器相伴的处理的依存关系的状态，应用所述水平方向的去块滤波器，所述垂直边界是编码时要被局部解码的图像内的块之间的垂直边界，所述水平方向的去块滤波器以位于所述垂直边界附近的像素为对象；垂直滤波部，跨越多个水平边界，应用垂直方向的去块滤波器，所述水平边界是包括通过所述水平滤波部被应用了所述水平方向的去块滤波器的像素的图像内的块之间的水平边界，所述垂直方向的去块滤波器以位于所述水平边界附近的像素为对象；以及编码部，使用通过所述垂直滤波部被应用了所述垂直方向的去块滤波器的图像，对图像进行编码。2.根据权利要求1所述的图像处理装置，其中所述水平滤波部以在编码时要被局部解码的图像的图片内位于被判定为要被应用所述水平方向的去块滤波器的全部的垂直边界附近的像素为对象，来应用所述水平方向的去块滤波器。3.根据权利要求2所述的图像处理装置，其中所述垂直滤波部以在通过所述水平滤波部被应用了去块滤波器的图像的图片内位于被判定为要被应用所述垂直方向的去块滤波器的全部的水平边界附近的像素为对象，来应用所述垂直方向的去块滤波器。4.根据权利要求3所述的图像处理装置，其中所述水平滤波部以使得对于块之间相邻的多个所述垂直边界的所述水平方向的去块滤波器彼此不产生依存关系的方式，以在作为所述水平方向的去块滤波器的处理对象的多个块之间不存在与垂直方向的去块滤波器相伴的处理的所述依存关系的状态，应用所述水平方向的去块滤波器，所述垂直滤波部以使得对于块之间相邻的多个所述水平边界的所述垂直方向的去块滤波器彼此不产生依存关系的方式，应用所述垂直方向的去块滤波器。5.根据权利要求4所述的图像处理装置，其中所述水平滤波部在对于块之间相邻的多个所述垂直边界的所述水平方向的去块滤波器彼此间使用不重复的抽头长度来应用所述水平方向的去块滤波器，所述垂直滤波部在对于块之间相邻的多个所述水平边界的所述垂直方向的去块滤波器彼此间使用不重复的抽头长度来应用所述垂直方向的去块滤波器。6.根据权利要求1所述的图像处理装置，其中所述水平滤波部并行地应用所述水平方向的去块滤波器，所述垂直滤波部并行地应用所述垂直方向的去块滤波器。7.根据权利要求1所述的图像处理装置，其中所述块的块大小为8×8，所述垂直边界的长度为8像素，所述水平边界的长度为8像素。8.根据权利要求1所述的图像处理装置，其中所述编码部按照每个从...

【专利技术属性】
技术研发人员：池田优，田中润一，森上义崇，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本,JP