图像编码设备、图像编码方法和程序技术

本发明专利技术提供了一种图像编码设备、图像编码方法和程序，其中，该图像编码设备包括：特征量生成单元，通过将在时间方向上与第一视点图片不同的第一视点图片和与第一视点图片不同的第二视点图片设置为参考图片的候选，针对参考图片的每个候选来生成表示图片之间的相关性的特征量；以及参考图片列表生成单元，通过基于特征量从参考图片的候选中选择与第二视点图片的参考图片一样多的第一视点图片的参考图片，生成参考图片列表。

【技术实现步骤摘要】

本技术涉及一种图像编码设备、图像编码方法和程序。具体地，可以通过针对其他视点的参考图片的数量选择时间方向或视差方向上的参考图片候选来生成参考图片列表，以改进编码效率。
技术介绍
近年来，将图像信息处理为数字数据的并且遵照如MPEG2（ISO（国际标准化组织）/IEC（国际电工委员会）13818-2）的方法的设备在通过广播站等进行信息传递以及通过普通家庭进行信息接收这两方面得到广泛使用，其中，该方法为了高效地传送并存储信息而使用图像信息所特有的冗余性、通过诸如离散余弦变换的正交变换和运动补偿来压缩图像信息。此外，能够实现高编码效率的、被称为H.264和MPEG4Part10（AVC（高级视频编码））的方法（下文中，称为“H.264/AVC”）越来越多地被使用，但是与MPEG2等相比，其编码和解码需要更多的运算量。根据这样的压缩和编码方法，使用了利用参考图片的画面间预测编码，并且在例如H.264/AVC中，可以从多个编码图片中选择参考图片。所选的每个参考图片均由被称为参考索引的变量来管理。根据日本专利申请早期公开第2010-63092号，根据距待编码的图片的时间距离在包含在多个参考图片中的两个参考图片之间分配参考索引，从而能够改进图像质量和编码效率。
技术实现思路
当对动态图像进行压缩和编码时，不仅使用对一个视点的动态图像的压缩和编码，而且使用对多个视点的动态图像的压缩和编码。在对多个视点的动态图像的压缩和编码中，将一个视点的动态图像设置为基本视图，将其他视点的动态图像设置为从属视图（dependent view），并且将基本视图的图片或多个视点的编码图片用作参考图片。如果使得仅使用时间方向上的参考图片的基本视图的参考图片的数量和能够使用时间方向或视差方向上的参考图片的从属视图的参考图片的数量相等，则可以使得基本视图的处理量与从属视图的处理量等同。因此，当基本视图和从属视图交替地用于由编码器进行编码时，由于在基本视图与从属视图之间处理量是等同的，因此使得诸如切换的控制更加容易。如果为基本视图和从属视图中的每一个设置编码器以进行编码，则由于处理量在基本视图与从属视图之间是等同的，因此不必使用与用于对基本视图进行编码的编码器相比具有更高处理能力的用于对从属视图进行编码的编码器。然而，如果限制从属视图的参考图片的数量并且使得该数量等于基本视图的参考图片的数量，则出现了如何选择参考图片的问题。因此，期望提供如下的图像编码设备、图像编码方法和程序：其能够通过针对其他视点的参考图片的数量选择时间方向或视差方向上的参考图片候选来生成参考图片列表，以改进编码效率。根据本技术的实施例，提供了一种图像编码设备，其包括：特征量生成单元，通过将在时间方向上与第一视点图片不同的第一视点图片和与第一视点图片不同的第二视点图片设置为参考图片的候选，针对参考图片的每个候选来生成表示图片之间的相关性的特征量；以及参考图片列表生成单元，通过基于特征量从参考图片的候选中选择与第二视点图片的参考图片一样多的第一视点图片的参考图片，生成参考图片列表。根据本技术的图像编码设备通过将在时间方向上与第一视点图片（例如，从属视图图片）不同的参考图片和第二视点图片（例如，与第一视点图片不同的基本视图）的参考图片设置为参考图片的候选，针对参考图片的每个候选来计算表示图片之间的相关性的特征量（例如，SAD值或SATD值）。通过基于特征量从参考图片的候选中选择与基本视图图片的参考图片一样多的从属视图图片的参考图片来生成参考图片列表。如果基于针对从属视图图片是GOP起始图片的情况的特征量的判别值等于或小于阈值，则基本视图图片（即，视差方向上的参考图片）包括在下一图片的参考图片列表中。如果判别值大于阈值，则参考图片列表仅包括下一图片的在时间方向上的参考图片。作为另一种方法，根据基于在第一视点图片是第一个图片时所获得的特征量的判别值与阈值之间的比较结果，更新参考图片的图案或者保持之前紧接的参考图片的图案。如果基本视图的参考图片包括在参考图片列表中，则保持针对包括基本视图的参考图片的情况的特征量，并且如果参考图片列表仅在预定时段内包括时间方向上的参考图片，则用针对锚图片（anchor picture）所算出的特征量更新所保存的特征量。如果图片的参考图片列表仅包含时间方向上的参考图片，则将针对该图片所算出的特征量和所保存的特征量进行比较，并且基于比较结果选择下一图片的参考图片。另外，如果该图片的参考图片列表包括基本视图的参考图片，则仅估计时间方向上的参考图片的特征量，并且基于估计特征量与针对包括基本视图的参考图片的情况的特征量之间的比较结果，选择下一图片的参考图片。通过使用针对从属视图图片的参考图片列表仅包括时间方向上的参考图片的情况的特征量和针对基本视图的图片的特征量来预先生成估计处理信息、并且使用与估计特征量的从属视图图片对应的基本视图图片的特征量和估计处理信息，计算估计特征量。如果基本视图的参考图片包含在参考图片列表中的状态持续了预定时段，则通过仅包括时间方向上的参考图片来更新参考图片列表。另外，如果第一图片和第二图片是隔行素材（interlaced material）并且参考图片列表包含基本视图的参考图片，则基于特征量而从时间方向上的参考图片中选择同相或反相的参考图片。也使用参考索引比等作为特征量。根据本技术的另一实施例，提供了一种图像编码方法，包括：通过将在时间方向上与第一视点图片不同的第一视点图片和与第一视点图片不同的第二视点图片设置为参考图片的候选，针对参考图片的每个候选来生成表示图片之间的相关性的特征量；以及通过基于特征量从参考图片的候选中选择与第二视点图片的参考图片一样多的第一视点图片的参考图片，生成参考图片列表。根据本技术的另一实施例，提供了一种用于使计算机通过使用参考图片列表对第一视点图片和第二视点图片执行编码处理的程序，该程序使得计算机执行如下过程：通过将在时间方向上与第一视点图片不同的第一视点图片和与第一视点图片不同的第二视点图片设置为参考图片的候选，针对参考图片的每个候选来生成表示图片之间的相关性的特征量；以及通过基于特征量从参考图片的候选中选择与第二视点图片的参考图片一样多的第一视点图片的参考图片，生成参考图片列表。根据本技术的程序是例如可以通过存储介质或通信介质（例如，通过诸如光盘、磁盘和半导体存储器的存储介本文档来自技高网...

【技术保护点】
一种图像编码设备，包括：特征量生成单元，通过将在时间方向上与第一视点图片不同的所述第一视点图片和与所述第一视点图片不同的第二视点图片设置为参考图片的候选，针对所述参考图片的每个候选来生成表示图片之间的相关性的特征量；以及参考图片列表生成单元，通过基于所述特征量从所述参考图片的候选中选择与所述第二视点图片的参考图片一样多的所述第一视点图片的参考图片，生成参考图片列表。

【技术特征摘要】
2011.08.09 JP 2011-1735661.一种图像编码设备，包括：
特征量生成单元，通过将在时间方向上与第一视点图片不同的所述第
一视点图片和与所述第一视点图片不同的第二视点图片设置为参考图片
的候选，针对所述参考图片的每个候选来生成表示图片之间的相关性的特
征量；以及
参考图片列表生成单元，通过基于所述特征量从所述参考图片的候选
中选择与所述第二视点图片的参考图片一样多的所述第一视点图片的参
考图片，生成参考图片列表。
2.根据权利要求1所述的图像编码设备，
其中，在基于针对所述第一视点图片是图片组GOP起始图片的情况
的特征量的判别值等于或小于阈值的情况下，所述参考图片列表生成单元
将第二视点参考图片包括在下一图片的参考图片列表中，而在所述判别值
大于所述阈值的情况下，所述参考图片列表生成单元仅将所述时间方向上
的参考图片包括在所述下一图片的参考图片列表中。
3.根据权利要求1所述的图像编码设备，
其中，所述参考图片列表生成单元根据基于在所述第一视点图片是图
片组起始图片时所获得的特征量的判别值与阈值之间的比较结果，更新所
述参考图片的图案或者保持之前紧接的参考图片的图案。
4.根据权利要求1所述的图像编码设备，
其中，在第二视点参考图片被包括在所述参考图片列表中的情况下，
所述参考图片列表生成单元保存针对包括所述第二视点参考图片的情况
的特征量，而在所述参考图片列表在预定时段内仅包含所述时间方向上的
参考图片的情况下，所述参考图片列表生成单元更新由针对图片组起始帧
中的图片或者每个场的起始图片所算出的特征量保存的特征量。
5.根据权利要求4所述的图像编码设备，
其中，在所述图片的所述参考图片列表仅包含所述时间方向上的参考
图片的情况下，所述参考图片列表生成单元将针对所述图片所算出的特征
量与所保存的特征量进行比较，并且基于比较结果选择下一图片的参考图
片。
6.根据权利要求1所述的图像编码设备，
其中，在所述图片的参考图片列表包括第二视点参考图片的情况下，
所述参考图片列表生成单元基于估计特征量与针对包括所述第二视点参
考图片的情况的特征量之间的比较结果，选择下一图片的参考图片，其中，
所述估计特征量用于估计仅所述时间方向上的参考图片的特征量。
7.根据权利要求...

【专利技术属性】
技术研发人员：染谷清登，
申请(专利权)人：索尼公司，
类型：发明
国别省市：