信息处理装置和方法、以及程序制造方法及图纸

本发明专利技术提供了信息处理装置和方法、以及程序。信息处理装置包括：检测单元，该检测单元被配置为检测由用户做出的姿势；识别单元，该识别单元被配置为识别由检测单元检测到的姿势的类型；控制单元，该控制单元被配置为控制第一应用和第二应用的操作；以及输出单元，该输出单元被配置为输出第一应用或第二应用的信息。如果当控制单元正在前台中控制第一应用的操作时姿势被识别单元识别，则控制单元基于由识别单元识别的姿势的类型来控制在第一应用的后台中操作的第二应用的操作。

【技术实现步骤摘要】

本专利技术涉及信息处理装置和方法、以及程序，并且更具体地涉及被配置为基于姿势来操作在后台中执行的应用的信息处理装置和方法、以及程序。
技术介绍
对于结合了相机的个人计算机和移动电话而言，用于通过识别用户做出的姿势来控制应用的技术被提出。图1示出了根据基于姿势操作应用的
技术介绍
的个人计算机221的示例。在图1所示的个人计算机221中，控制器241与由相机223捕捉的镜像242 —起被显示在显示器222上。用户的手261被相机223识别，并且控制器241上的各个按钮基于用户的手261 的位置和形状而被选择。通过此选择，正在显示器222上显示图像M3的应用被控制。此外，在日本未经实审专利申请公布No. 2008-282092中，提出了如下的信息处理装置当自从操作开始以后在某时间段中没有输入时或者当姿势输入已失败时，该信息处理装置显示用于笔式装置或鼠标装置的姿势输入列表，以便使用户能学习姿势命令。
技术实现思路
然而，在根据
技术介绍
的技术中，与显示器222的前台(foreground)中所显示的应用相对应的图像被姿势控制。因此，在根据
技术介绍
的技术中，要控制的应用可能不基于姿势而被控制，直到与该应用相对应的图像被显示在显示器222的前台中为止。能够基于姿势来操作没有显示在显示器的前台中的应用是所希望的。根据本专利技术的一个实施例的一种信息处理装置包括检测装置，该检测装置用于检测由用户做出的姿势；识别装置，该识别装置用于识别由检测装置检测到的姿势的类型； 控制装置，该控制装置用于控制第一应用和第二应用的操作；以及输出装置，该输出装置用于输出第一应用或第二应用的信息。如果当控制装置正在前台中控制第一应用的操作时姿势被识别装置识别，则控制装置基于由识别装置识别的姿势的类型来控制在第一应用的后台中操作的第二应用的操作。信息处理装置还可包括确定装置，该确定装置用于确定是否存在被识别的姿势。 在第一应用的信息被输出的通常模式中，当由确定装置确定不存在被识别的姿势时，控制装置可将通常模式切换为反馈模式，在反馈模式中关于姿势的操作信息被反馈给用户。信息处理装置还可包括推断装置，该推断装置用于当由确定装置确定不存在被识别的姿势时通过类推来推断姿势的类型。控制装置可使输出装置输出与由推断装置推断的姿势的类型相对应的、用于学习姿势的反馈信息。反馈信息可以是被推断的姿势的移动图像或动画。当用户已执行了与某姿势相对应的操作时，控制装置可切换通常模式和反馈模式。在反馈模式中，输出装置可输出检测装置进行检测时捕捉的用户的镜像以及姿势 的列表，作为操作信息。在通常模式中，当第ニ应用的操作基于姿势而被控制时，输出装置可将与基于姿 势的控制结果相对应的信息输出特定时间段。输出装置可输出音频信息作为与基于姿势的控制结果相对应的信息。当到反馈模式的切换已被执行时，输出装置可以以半透明的方式显示在第ー应用 的图像上叠加的反馈模式的图像。当到反馈模式的切换已被执行时，输出装置可在作为第ー应用的图像的ー部分的 区域中显示反馈模式的图像。根据本专利技术的ー个实施例的ー种信息处理方法包括以下步骤检测由用户做出的 姿势；识别在检测的步骤中检测到的姿势的类型；控制第ー应用和第ニ应用的操作；以及 输出第ー应用或第ニ应用的信息。如果当在控制的步骤中第ー应用的操作正在前台中被控 制时在识别的步骤中姿势被识别，则控制的步骤基于在识别的步骤中识别的姿势的类型来 控制在第ー应用的后台中操作的第ニ应用的操作。根据本专利技术的ー个实施例的ー种程序是用于使计算机执行以下步骤的程序检测 由用户做出的姿势；识别在检测的步骤中检测到的姿势的类型；控制第ー应用和第ニ应用 的操作；以及输出第ー应用或第ニ应用的信息。如果当在控制的步骤中第ー应用的操作正 在前台中被控制时在识别的步骤中姿势被识别，则控制的步骤基于在识别的步骤中识别的 姿势的类型来控制在第ー应用的后台中操作的第ニ应用的操作。根据本专利技术的ー个实施例，由用户做出的姿势被检测，所检测到的姿势的类型被 识别，并且第ー应用和第ニ应用的操作被控制。第ー应用或第ニ应用的信息被输出。如果 当第ー应用的操作正在前台中被控制时姿势被识别，则在第ー应用的后台中操作的第ニ应 用的操作基于所识别的姿势的类型而被控制。根据本专利技术的实施例，可以基于姿势来容易地控制在后台中操作的应用的操作。 附图说明图1是描述根据
技术介绍
的通过姿势遥控来控制的操作的示图；图2是示出个人计算机的外部配置的示图；图3是示出根据本专利技术的ー个实施例的个人计算机的硬件的配置示例的框图；图4是示出中央处理单元(CPU)的功能配置的示例的框图；图5是示出通常模式下的显示示例的示图；图6是描述用于输入姿势命令的处理的流程图；图7是示出通常模式下的另ー显示示例的示图；图8是示出姿势命令与操作内容之间的关系的示图；图9是描述用于建议输入方法的处理的流程图；图10是示出反馈模式下的显示示例的示图；图11是示出建议输入方法的显示示例的示图；图12是示出建议输入方法的另ー显示示例的示图13是示出姿势命令与显示内容之间的关系的示图；图14是示出通常模式下的另一显示示例的示图；图15是示出通常模式下的另一显示示例的示图；图16是示出反馈模式下的另一显示示例的示图；并且图17是示出反馈模式下的另一显示示例的示图。具体实施例方式图2是示出根据本专利技术的一个实施例的个人计算机1的配置示例的示图。图2所示的个人计算机1包括主体13和显示器12，在显示器12上安装了相机11。 相机11捕捉静止图像或移动图像，它们可通过单眼相机、立体相机、红外线相机等来获得。当用户2用他/她的手3在三维空间中做出姿势时，姿势的图像被相机11捕捉。 基于所捕捉的图像来识别姿势，并且执行与所识别的姿势的类型相对应的控制。因此，用户 2可以不控制与显示器12上显示的图像相对应的应用，也就是说，用户2可以不控制前台中操作的应用而是控制后台中操作的应用。个人计算机的配置图3是示出个人计算机1的硬件的配置示例的框图。在个人计算机1中，CPU 22、只读存储器(ROM) 23和随机存取存储器(RAM) 24通过总线25彼此相连接。输入/输出接口沈也与总线25连接。包括web相机的相机11，包括键盘、触摸面板、触摸板、笔式装置、鼠标和麦克风的输入单元27，显示器12，包括扬声器 (未示出)的输出单元21，以及包括硬盘和非易失性存储器的存储单元观与输入/输出接口沈连接。此外，包括网络接口的通信单元四和驱动可拆卸介质31的驱动器30与输入 /输出接口 26连接，其中可拆卸介质31例如是磁盘、光盘、磁光盘或半导体存储器。在如上所述地配置的个人计算机1中，例如，CPU 22通过经由输入/输出接口沈和总线25将程序载入RAM 24中，来执行存储单元观中存储的程序，以便执行上述的系列处理。要由个人计算机1 (CPU 22)执行的程序例如可被记录在可拆卸介质31上并且被提供，其中可拆卸介质31是磁盘(包括柔性盘)。程序可被记录在作为包装介质(package medium)的可拆卸介质31上并且被提供。光盘(致密盘-只读存储器(⑶-ROM)、数字多功能光碟(DVD)等)、磁光盘、半导体存储器等被用作包装介质。可替代地，可通过诸如局域网、因特网或数字卫星广播之类的有线或无本文档来自技高网...

【技术保护点】
１．一种信息处理装置，包括：检测装置，所述检测装置用于检测由用户做出的姿势；识别装置，所述识别装置用于识别由所述检测装置检测到的所述姿势的类型；控制装置，所述控制装置用于控制第一应用和第二应用的操作；以及输出装置，所述输出装置用于输出所述第一应用或所述第二应用的信息，其中，如果当所述控制装置正在前台中控制所述第一应用的操作时所述姿势被所述识别装置识别，则所述控制装置基于由所述识别装置识别的所述姿势的类型来控制在所述第一应用的后台中操作的所述第二应用的操作。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：繁田修，野田卓郎，
申请(专利权)人：索尼公司，
类型：发明
国别省市：JP