信息处理终端、远程控制方法以及程序技术

提供消除寻找遥控器的麻烦，从而显著提高用户的便利性的远程控制技术。信息处理终端具备通信装置，经由该通信装置对被控制设备发送控制命令而对该被控制设备进行远程控制，其特征在于，具备：虚拟遥控器生成部，从作为该信息处理终端的周围的图像的周围图像中确定所述被控制设备以及作为期望的控制操作的期望控制操作，并且生成用于受理用户针对确定出的所述期望控制操作的操作指示的受理对象；操作受理部，经由所述受理对象受理由用户作出的所述操作指示；以及命令发送部，将与所述操作受理部受理的所述操作指示对应的所述控制命令发送到所述被控制设备。送到所述被控制设备。送到所述被控制设备。

【技术实现步骤摘要】
【国外来华专利技术】信息处理终端、远程控制方法以及程序


[0001]本专利技术涉及使用便携信息终端进行远程控制的远程控制技术。

技术介绍

[0002]作为便携型信息终端有头戴式显示器(以下记载为“HMD”)，头戴式显示器以眼镜形式在玻璃部的显示画面上重叠显示实际空间的影像和通过计算机形成的增强现实(AR：Augmented Reality)的生成图像(虚拟形象等AR对象)。
[0003]另一方面，利用远程控制器(以下记载为“遥控器”)操作的设备不断增加。为了应对这种情况，汇集各种遥控器功能的学习遥控器(存储对应各种遥控器功能)、智能遥控器(经由Wi
‑
Fi、无线LAN等因特网通信来管理设备的动作)等得到普及。例如，在专利文献1中，公开了通过使带有指向性的通用遥控器朝向作为对象的被远程控制设备来确立无线链路，利用接收到从被远程控制设备发送的操作应用的该通用遥控器来操作被远程控制设备的远程操作系统。
[0004]现有技术文献
[0005]专利文献
[0006]专利文献1：国际公开第2012/132171号

技术实现思路

[0007]根据专利文献1公开的技术，仅通过使通用遥控器朝向希望远程操作的设备，就能够选择设备并且能够使用该通用遥控器对所选择的设备进行远程操作。然而，不限于通用遥控器，已有的遥控器有未普遍使用的功能的功能按钮或者功能按钮的配置与用户的喜好不同等，未必是对用户友好的接口。另外，即便是通用遥控器，也未解决寻找遥控器的麻烦。
[0008]本专利技术是鉴于上述事情而完成的，其目的在于提供一种消除寻找遥控器的麻烦，显著提高用户的便利性的远程控制技术。
[0009]本专利技术提供一种信息处理终端，具备通信装置，经由该通信装置对被控制设备发送控制命令而对该被控制设备进行远程控制，其特征在于，具备：虚拟遥控器生成部，从作为该信息处理终端的周围的图像的周围图像，确定所述被控制设备以及作为期望的控制操作的期望控制操作，并且生成受理用户针对确定出的所述期望控制操作的操作指示的受理对象；操作受理部，经由所述受理对象受理由用户作出的所述操作指示；以及命令发送部，将与所述操作受理部受理的所述操作指示对应的所述控制命令发送给所述被控制设备。
[0010]根据本专利技术，提供消除寻找遥控器的麻烦，显著提高用户的便利性的远程控制技术。上述以外的课题、结构以及效果通过以下的实施方式的说明将更加明确。
附图说明
[0011]图1是用于说明本专利技术的实施方式的概要的说明图。
[0012]图2是本专利技术的实施方式的远程操作系统的系统结构图。
[0013]图3是本专利技术的实施方式的HMD的硬件结构图。
[0014]图4是本专利技术的实施方式的HMD的功能框图。
[0015]图5是用于说明本专利技术的实施方式的虚拟遥控器图像的一个例子的说明图。
[0016]图6是用于说明本专利技术的实施方式的解析用表格的一个例子的说明图。
[0017]图7的(a)是用于说明本专利技术的实施方式的控制数据表格的一个例子的说明图，(b)是用于说明本专利技术的实施方式的遥控器表格的一个例子的说明图。
[0018]图8是用于说明本专利技术的实施方式的手势动作表格的一个例子的说明图。
[0019]图9是本专利技术的实施方式的远程操作处理的流程图。
[0020]图10是本专利技术的实施方式的确定信息取得处理的流程图。
[0021]图11是本专利技术的实施方式的控制数据取得处理的流程图。
[0022]图12的(a)是用于说明本专利技术的变形例的提示面的例子的说明图，(b)以及(c)是用于说明本专利技术的变形例的虚拟遥控器图像的例子的说明图。
[0023]图13的(a)是用于说明本专利技术的变形例的提示面的例子的说明图，(b)是用于说明本专利技术的变形例的虚拟遥控器图像的例子的说明图。
[0024]图14是本专利技术的变形例的远程操作系统的系统结构图。
[0025]图15是用于说明本专利技术的变形例的概要的说明图。
[0026]图16是本专利技术的变形例的智能手机的硬件结构图。
[0027](符号说明)
[0028]100：HMD；101：智能机；105：扩展接口部；106：定时器；110：存储装置；111：主处理器；112：系统总线；113：RAM；114：ROM；115：闪存存储器；120：操作受理装置；121：按钮开关；122：触摸面板；123：操作键；130：图像处理装置；131：显示器；133：外置摄像机；134：内置摄像机；140：声音处理装置；141：扬声器；143：麦克风；150：传感器；151：接收部；152：陀螺传感器；153：地磁传感器；154：加速度传感器；155：深度传感器；160：通信装置；161：LAN通信I/F；162：电话网通信I/F；163：BT通信I/F；164：红外线通信I/F；210：主控制部；220：虚拟遥控器生成部；221：图像取得部；222：确定信息取得部；223：控制数据取得部；224：对应建立部；225：虚拟图像生成部；230：操作受理部；240：命令发送部；250：数据存储部；251：解析用表格；251a：记载内容；251b：解析内容；251c：记载类别；252：控制数据表格；252a：被控制设备名；252b：ID；252c：控制数据；252d：详细信息；253：遥控器表格；253a：记载类别；253b：解析内容；253c：ID；253d：控制命令；253e：区域；253f：显示数据；253g：创建日期时间；254：手势动作表格；254a：手势动作；254b：操作指示；255：处理数据；300：提示面；301：提示面；305：外框；310：记载信息；311：被控制设备名；312：期望控制操作；400：虚拟遥控器图像；401：虚拟遥控器图像；410：被控制设备信息显示区域；411：被控制设备名；420：期望控制操作显示区域；421：受理对象；422：受理对象；423：受理对象；431：不可显示；500：远程操作系统；510：被控制设备；520：无线路由器；530：网络；550：网络服务器；901：用户。
具体实施方式
[0029]以下，使用附图，说明本专利技术的实施方式。
[0030]使用附图，说明本专利技术的实施方式。在说明实施方式的结构等之前，说明本实施方式的概要。此外，在本说明书以及附图中，关于同一物记载同一符号。
[0031]本实施方式例如是考虑容易找不到远程控制器(遥控器、远程操作装置)的上年纪的用户等的使用的例子。上年纪的用户不仅容易找不到遥控器，而且多数对已有的遥控器所配备的大量的按钮感到麻烦。在本实施方式中，为了解决这些问题，例如，无论何时，只要通过手写等在恰当的纸上简单地记载必要最低限的控制操作，就能够如真正的遥控器那样地使用它。
[0032]图1是用于说明本实施方式的概要的图。在本实施方式中，佩戴HMD(头戴式显示器)100的用户901准备记载有希望操作的设备(被控制设备)的本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种信息处理终端，具备通信装置，经由该通信装置对被控制设备发送控制命令而对该被控制设备进行远程控制，其特征在于，具备：虚拟遥控器生成部，从作为该信息处理终端的周围的图像的周围图像中确定所述被控制设备以及作为期望的控制操作的期望控制操作，并且生成用于受理用户针对所确定出的所述期望控制操作的操作指示的受理对象；操作受理部，经由所述受理对象受理由用户作出的所述操作指示；以及命令发送部，将与所述操作受理部受理的所述操作指示对应的所述控制命令发送到所述被控制设备。2.根据权利要求1所述的信息处理终端，其特征在于，所述周围图像包括具有表示所述期望控制操作的表述的提示面，所述虚拟遥控器生成部具备：确定信息取得部，从所述周围图像中分别取得用于确定所述被控制设备的被控制设备确定信息和用于确定所述期望控制操作的期望控制操作确定信息；控制数据取得部，使用所述被控制设备确定信息，取得该被控制设备的控制数据；对应建立部，将包含于所述控制数据的用于控制所述被控制设备的控制命令和利用所述期望控制操作确定信息确定出的所述期望控制操作建立对应；虚拟图像生成部，生成所述受理对象，并生成虚拟遥控器图像，在所述虚拟遥控器图像中，将该受理对象配置于在将所述周围图像显示于所述该信息处理终端的显示器的情况下显示表示所述期望控制操作的表述的区域中。3.根据权利要求2所述的信息处理终端，其特征在于，所述虚拟图像生成部使所生成的所述虚拟遥控器图像在该信息处理终端具备的显示器上显示预先决定的期间。4.根据权利要求2所述的信息处理终端，其特征在于，所述虚拟图像生成部在所述被控制设备不受理的控制操作被确定为所述期望控制操作的情况下，对所述受理对象进行预先决定的不可显示。5.根据权利要求2所述的信息处理终端，其特征在于，所述信息处理终端还具备控制数据表格，该控制数据表格将所述被控制设备的所述控制数据与该被控制设备建立对应而存储...

【专利技术属性】
技术研发人员：中出真弓，伊藤保，
申请(专利权)人：麦克赛尔株式会社，
类型：发明
国别省市：