图像处理设备、图像处理方法和程序技术

本发明专利技术涉及图像处理设备、图像处理方法和程序。一种图像处理设备，包括：图像处理单元，合成虚拟对象与捕捉图像。图像处理单元基于捕捉图像中显示的对象的状态或类型确定虚拟对象。

【技术实现步骤摘要】

本专利技术涉及一种图像处理设备、图像处理方法和程序。
技术介绍
近年来，已知把各种对象与通过捕捉获得的图像(以下，也称为“捕捉图像”)进行合成的技术。各种对象可与捕捉图像合成，并且例如，在捕捉了被摄体(诸如，人或动物)的图像的情况下，被摄体穿着的物品(诸如，衣服或包)的图像可作为对象与捕捉图像合成。公开了各种技术作为用于合成对象与捕捉图像的技术。例如，公开了一种用于合成衣服的图像与人的图像的技术(例如，参见JP2005-136841A)。通过观看经把衣服的图像与人的图像进行合成而获得的合成图像，即使用户未实际在商店中试穿衣服，用户也能够在知道当用户穿着衣服时用户将会看起来如何的情况下选择衣服。另一方面，除了用于合成对象与捕捉图像的技术之外，还存在一种用于修改捕捉图像自身的技术。作为用于修改捕捉图像自身的技术的例子，给出了称为减弱现实(Diminished Reality)的技术。根据该技术，当由用户指定捕捉图像中显示的对象时,指定的对象被从捕捉图像消除。
技术实现思路
然而，例如，未公开用于基于捕捉图像中显示的对象的状态或类型执行图像处理的技术。因此，存在这样的可能性:处理捕捉图像，而没有考虑对象的状态或对象的类型。例如，在捕捉图像中显示的用户把衣服放在他的/她的身上的情况下，如果用户已经穿着的衣服从该衣服露出，则难以自动地从捕捉图像消除该露出的部分。另外，还难以根据捕捉图像中显示的用户如何穿着衣服调整与捕捉图像合成的对象以及难以根据捕捉图像中显示的用户穿戴哪种饰品改变与捕捉图像合成的对象。因此，希望实现一种用于基于捕捉图像中显示的对象的状态或类型确定与捕捉图像合成的虚拟对象的技术。根据本专利技术的实施例，提供了一种包括把虚拟对象与捕捉图像进行合成的图像处理单元的图像处理设备。该图像处理单元基于捕捉图像中显示的对象的状态或类型确定虚拟对象。根据本专利技术的另一实施例，提供了一种图像处理方法，包括:基于捕捉图像中显示的对象的状态或类型，确定要与捕捉图像进行合成的虚拟对象。根据本专利技术的又一实施例，提供了一种用于使计算机用作图像处理设备的程序，该图像处理设备包括把虚拟对象与捕捉图像进行合成的图像处理单元。该图像处理单元基于捕捉图像中显示的对象的状态或类型确定虚拟对象。根据上述本专利技术的实施例，基于捕捉图像中显示的对象的状态或类型能够确定要与捕捉图像合成的虚拟对象。附图说明图1是表示根据本专利技术实施例的图像处理系统的概述的示图；图2是显示图像处理设备的结构例子的方框图；图3是表示骨架结构信息和深度信息的示图；图4是表示图像处理单元的功能的例子的示图；图5是表示图像处理单元的功能的例子的示图；图6是表示图像处理设备的操作的流程的例子的流程图；图7是表示图像处理单元的功能的第一修改例子的示图；图8是表示图像处理单元的功能的第一修改例子的示图；图9是显示根据第一修改例子的图像处理设备的操作的流程的流程图；图10是表示图像处理单元的功能的第二修改例子的示图；图11是表示图像处理单元的功能的第二修改例子的示图；图12是表示图像处理单元的功能的第二修改例子的示图；图13是显示根据第二修改例子的图像处理设备的操作的流程的流程图；图14是表示图像处理单元的功能的第三修改例子的示图；图15是表示图像处理单元的功能的第三修改例子的示图；图16是表示图像处理单元的功能的第三修改例子的示图；和图17是显示根据第三修改例子的图像处理设备的操作的流程的流程图。具体实施例方式以下，将参照附图详细描述本专利技术的优选实施例。需要注意的是，在本说明书和附图中，具有基本上相同的功能和结构的结构元素由相同的标号表示，并且省略这些结构元素的重复解释。另外，在本说明书和附图中，存在具有基本上相同的功能和结构的多个结构元素通过利用相同标号之后的不同字母表示而彼此区分的一些情况。需要注意的是，在不需要使具有基本上相同的功能和结构的多个结构元素彼此区分的情况下，所述多个结构元素仅由相同的标号表不。另外，将按照下面的次序描述“具体实施方式”。1.图像处理系统的概述2.图像处理设备的功能3.图像处理设备的操作4.第一修改例子中的功能5.第一修改例子中的操作6.第二修改例子中的功能7.第二修改例子中的操作8.第三修改例子中的功能9.第三修改例子中的操作10.结论〈1.图像处理系统的概述〉在下面，首先，将参照图1描述根据本专利技术实施例的图像处理系统的概述。图1是表示根据本专利技术实施例的图像处理系统的概述的示图。如图1中所述，根据本专利技术实施例的图像处理系统10包括图像处理设备100、显示单元130、图像捕捉单元140和传感器150。安装图像处理系统10的地点不受具体限制。例如，图像处理系统10可安装在被摄体20的家里。此外，在图1中显示的例子中，构成图像处理系统10的多个块(例如，图像处理设备100、显示单元130、图像捕捉单元140和传感器150)被分开地构造，但构成图像处理系统10的所述多个块中的一些块的组合可集成为一个块。例如，构成图像处理系统10的所述多个块可嵌入在智能电话、PDA(个人数字助手)、移动电话、便携式音乐再现装置、便携式视频处理装置或便携式游戏装置中。图像捕捉单元140捕捉存在于真实空间中的对象的图像。存在于真实空间中的对象不受具体限制，而是可以是生物(诸如，人或动物)或者除生物之外的物品(诸如例如，车库或电视柜)。在图1中显示的例子中，被摄体20(例如，人)由图像捕捉单元140捕捉作为存在于真实空间中的对象。由图像捕捉单元140捕捉的图像(以下，也称为“捕捉图像”)可由显示单元130显示。由显示单元130显示的捕捉图像可以是RGB图像。在图1中显示的例子中，显示被摄体21的捕捉图像131由显示单元130显示。传感器150具有检测真实空间中的参数的功能。例如，在传感器150由红外传感器构成的情况下，传感器150能够检测真实空间中的红外辐射，并把根据红外辐射的量的电信号作为检测数据提供给图像处理设备100。例如，图像处理设备100能够基于检测数据识别存在于真实空间中的对象。传感器150的类型不限于红外传感器。另外，在图1中显示的例子中，检测数据被从传感器150提供给图像处理设备100，但提供给图像处理设备100的检测数据也可以是由图像捕捉单元140捕捉的图像。捕捉图像由图像处理设备100处理。例如，图像处理设备100能够通过根据存在于真实空间中的对象的识别结果把虚拟对象与捕捉图像进行合成来处理捕捉图像。显示单元130还能够显示已由图像处理设备100处理的捕捉图像。例如，在被摄体21的位置由图像处理设备100识别的情况下，在被摄体21的位置合成虚拟对象(诸如，衣服的图像)的捕捉图像可由显示单元130显示。通过把预先与捕捉图像分开地登记的图像叠加在捕捉图像上，或者通过修改捕捉图像(例如，通过把从捕捉图像捕捉的图像叠加在捕捉图像上)，可执行虚拟对象的合成。通过观看以这种方式处理的捕捉图像，被摄体20能够在知道当他/她穿着该衣服时他/她将会看起来如何的情况下选择衣服，而不必实际试穿该衣服。然而，例如用于执行与捕捉图像中显示的被摄体20的状态或类型对应的图像处理的技术未被公开。因此，存在这样的可能性:未考虑被摄体20正穿着的衣服的状态或类型的虚拟对象与被摄体21合成。本文档来自技高网...

【技术保护点】
一种图像处理设备，包括：图像处理单元，合成虚拟对象与捕捉图像，其中图像处理单元基于捕捉图像中显示的对象的状态或类型确定虚拟对象。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：宫崎丽子，
申请(专利权)人：索尼公司，
类型：发明
国别省市：