虚拟现实交互方法及装置制造方法及图纸

本申请提出虚拟现实交互方法及装置。方法包括：实时检测VR用户的眼睛动作；判断VR用户的眼睛动作是否为主动眨眼，若是，根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令，对VR图像执行该VR操作指令。本申请无需多余控制器，有效增强了VR交互的可操作性，增强了VR交互的沉浸感和操作舒适性。

【技术实现步骤摘要】

本申请涉及VR(VirtualReality，虚拟现实)
，尤其涉及VR交互方法及装置。
技术介绍
VR技术是一种创建和体验虚拟世界的计算机仿真系统技术。它利用计算机生成一种模拟环境，利用多源信息融合的交互式的三维动态视景和实体行为的系统仿真使用户沉浸到该环境中。VR技术未来将会发展成一种改变人类生活方式的新突破。在二维屏幕交互中，几乎所有控制命令都可以抽象为按键动作。而对于VR输入设备来说，自然交互更重要，即现实世界里如何跟外界交互，在虚拟世界里人们也希望同样的方式交互，沉浸感更高，效率高，学习成本低。目前，VR交互仍在探索和研究中，与各种高科技的结合，将会使VR交互产生无限可能。VR不会存在一种通用的交互手段，它的交互要比平面图形交互拥有更加丰富的形式。目前的VR交互方式主要有如下几种：一、感官式沉浸强调身体的沉浸感，主要靠采集肢体动作来进行VR交互。代表产品有Leapmotion、Nimblesense、诺亦腾、Priovr、ControlVR、Dexmo、Kinect、Omni。感官式沉浸带来较强的沉浸感，带上头显，用户可低头看到自己的双手动作甚至全身动作，但在互动场景中，用户需双手长期悬空操作，或需记忆较多手势命令，影响用户体验。现有的借助辅助设备增强沉浸感的方式只会在特定超重度的场景中使用，因为其固有的使用门槛，需要用户花费比较长的时间穿戴和校准才能够使用。这些辅助设备存在一定的客观问题，会使用户操作得很累，削弱舒适性，且使用场景极其受限。二、交互式沉浸强调功能性，主要靠动作跟踪和按键控制来进行交互。代表产品有Stem，Hydra，Wii，摇杆、方向盘、体感枪等。交互式沉浸虽然能通过对设备空间位置的跟踪实现部分沉浸感，并通过按键命令实现较高效的控制，但是无法满足用户在虚拟世界中触摸、拿捏等自然交互的愿望。随着VR的不断扩展和应用，其交互问题也逐渐凸显，交互问题跟VR的功能息息相关，VR中的交互会影响用户的体验以及沉浸感。VR要提供完美的沉浸式体验，配上游戏手柄或者辅助设备都并不是最佳选择，而是要更为恰当的解决方案。
技术实现思路
本申请实施例提供VR交互方法及装置，以增强VR交互的沉浸感，增强VR交互操作舒适性。本申请的技术方案是这样实现的：一种虚拟现实VR交互方法，该方法包括：实时检测VR用户的眼睛动作；判断VR用户的眼睛动作是否为主动眨眼，若是，根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令，对VR图像执行该VR操作指令。所述判断VR用户的眼睛动作是否为主动眨眼包括：根据预先定义的主动眨眼动作对应的眨动时长或/和眨动频率，判断用户的眼睛动作是否为主动眨眼。所述根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令包括：当左眼眨动时，确定对应的VR操作指令为向左切换VR图像视野指令，当右眼眨动时，确定对应的VR操作指令为向右切换VR图像视野；或/和，当双眼同时眨动时，确定对应的VR操作指令为确认当前VR图像视野；或/和，根据预先定义的眨眼频率范围与切换视野大小的对应关系，确定当前眨眼频率对应的VR图像切换视野大小。所述根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令包括：当左眼眨动时，确定对应的VR操作指令为向左旋转VR图像菜单，当右眼眨动时，确定对应的VR操作指令为向右切换VR图像菜单；或/和，当双眼同时眨动时，确定对应的VR操作指令为确认当前视线交互确定的位置；或/和，根据预先定义的眨眼频率范围与VR图像菜单旋转角度的对应关系，确定当前眨眼频率对应的VR图像菜单旋转角度。所述所述根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令包括：当左眼眨动时，确定对应的VR操作指令为将当前在VR图像上的操作符号向左移动，当右眼眨动时，确定对应的VR操作指令为将当前在VR图像上的操作符号向右移动；或/和，当双眼同时眨动时，确定对应的VR操作指令为确认点击当前在VR图像上的操作符号；或/和，根据预先定义的眨眼频率范围与对当前在VR图像上的操作符号的移动步长的对应关系，确定当前眨眼频率对应的对当前在VR图像上的操作符号的移动步长。所述所述根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令包括：当左眼眨动时，确定对应的VR操作指令为向左旋转当前浏览的VR图像，当右眼眨动时，确定对应的VR操作指令为向右切换当前浏览的VR图像；或/和，当双眼同时眨动时，确定对应的VR操作指令为按照视线交互点所在位置，将当前位置的图像放大到全屏浏览。所述所述根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令包括：当左眼眨动时，确定执行VR图像上左侧的操作符号对应的VR操作指令，当右眼眨动时，确定执行VR图像上右侧的操作符号对应的VR操作指令；或/和，当双眼同时眨动时，确定执行VR图像上中间位置的操作符号对应的VR操作指令。所述根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令包括：当双眼同时眨动时，确定对应的VR操作指令为抓取当前VR图像界面；或/和，当双眼同时眨动时，确定对应的VR操作指令为对当前VR图像进行拍照。一种虚拟现实VR交互装置，该装置包括：眼睛动作检测模块：用于实时检测VR用户的眼睛动作，判断VR用户的眼睛动作是否为主动眨眼，确定眨动的眼睛或/和眨动的频率；VR操作匹配模块：用于根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令，对VR图像执行该VR操作指令。所述眼睛动作检测模块判断VR用户的眼睛动作是否为主动眨眼包括：根据预先定义的主动眨眼动作对应的眨动时长或/和眨动频率，判断用户的眼睛动作是否为主动眨眼。所述VR操作匹配模块根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令包括：当左眼眨动时，确定对应的VR操作指令为向左切换VR图像视野指令，当右眼眨动时，确定对应的VR操作指令为向右切换VR图像视野；或/和，当双眼同时眨动时，确定对应的VR操作指令为确认当前VR图像视野；或/和，根据预先定义的眨眼频率范围与切换视野大小的对应关系，确定当前眨眼频率对应的VR图像切换视野大小。所述VR操作匹配模块根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令包括：当左眼眨动时，确定对应的VR操作指令为向左旋转VR图像菜单，当右眼眨动时，确定对应的VR操作指令为向右切换VR图像菜单；或/和，当双眼同时眨动时，确定对应的VR操作指令为确认当前视线交互确定的位置；或/和，根据预先定义的眨眼频率范围与VR图像菜单旋转角度的对应关系，确定当前眨眼频率对应的VR图像菜单旋转角度。所述VR操作匹配模块根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令包括：当左眼眨动时，确定对应的VR操作指令为将当前在VR图像上的操作符号向左移动，当右眼眨动时，确定对应的VR操作指令为将当前在VR图像上的操作符号向右移动；或/和，当双眼同时眨动时，确定对应的VR操作指令为确认点击当前在VR图像上的操作符号；或/和，根据预先定义的眨眼频率范围与对当前在VR图像上的操作符号的移动步长的对应关系，确定当前眨眼频率对应的对当前在VR图像上的操作符号的移动步长。所述VR操作匹配模块根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令包括：当本文档来自技高网...

【技术保护点】
一种虚拟现实VR交互方法，其特征在于，该方法包括：实时检测VR用户的眼睛动作；判断VR用户的眼睛动作是否为主动眨眼，若是，根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令，对VR图像执行该VR操作指令。

【技术特征摘要】
1.一种虚拟现实VR交互方法，其特征在于，该方法包括：实时检测VR用户的眼睛动作；判断VR用户的眼睛动作是否为主动眨眼，若是，根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令，对VR图像执行该VR操作指令。2.根据权利要求1所述的方法，其特征在于，所述判断VR用户的眼睛动作是否为主动眨眼包括：根据预先定义的主动眨眼动作对应的眨动时长或/和眨动频率，判断用户的眼睛动作是否为主动眨眼。3.根据权利要求1所述的方法，其特征在于，所述根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令包括：当左眼眨动时，确定对应的VR操作指令为向左切换VR图像视野指令，当右眼眨动时，确定对应的VR操作指令为向右切换VR图像视野；或/和，当双眼同时眨动时，确定对应的VR操作指令为确认当前VR图像视野；或/和，根据预先定义的眨眼频率范围与切换视野大小的对应关系，确定当前眨眼频率对应的VR图像切换视野大小。4.根据权利要求1所述的方法，其特征在于，所述根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令包括：当左眼眨动时，确定对应的VR操作指令为向左旋转VR图像菜单，当右眼眨动时，确定对应的VR操作指令为向右切换VR图像菜单；或/和，当双眼同时眨动时，确定对应的VR操作指令为确认当前视线交互确定的位置；或/和，根据预先定义的眨眼频率范围与VR图像菜单旋转角度的对应关系，确定当前眨眼频率对应的VR图像菜单旋转角度。5.根据权利要求1所述的方法，其特征在于，所述所述根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令包括：当左眼眨动时，确定对应的VR操作指令为将当前在VR图像上的操作符号向左移动，当右眼眨动时，确定对应的VR操作指令为将当前在VR图像上的操作符号向右移动；或/和，当双眼同时眨动时，确定对应的VR操作指令为确认点击当前在VR图像上的操作符号；或/和，根据预先定义的眨眼频率范围与对当前在VR图像上的操作符号的移动步长的对应关系，确定当前眨眼频率对应的对当前在VR图像上的操作符号的移动步长。6.根据权利要求1所述的方法，其特征在于，所述所述根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令包括：当左眼眨动时，确定对应的VR操作指令为向左旋转当前浏览的VR图像，当右眼眨动时，确定对应的VR操作指令为向右切换当前浏览的VR图像；或/和，当双眼同时眨动时，确定对应的VR操作指令为按照视线交互点所在位置，将当前位置的图像放大到全屏浏览。7.根据权利要求1所述的方法，其特征在于，所述所述根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令包括：当左眼眨动时，确定执行VR图像上左侧的操作符号对应的VR操作指令，当右眼眨动时，确定执行VR图像上右侧的操作符号对应的VR操作指令；或/和，当双眼同时眨动时，确定执行VR图像上中间位置的操作符号对应的VR操作指令。8.根据权利要求1所述的方法，其特征在于，所述根据眨动的眼睛或/和眨动的频率，确定对应的VR操作指令包括：当双眼同时眨动时，确定对应的VR操作指令为抓取当前VR图像界面；或/和，当双眼同时眨动时，确定对应的VR操作指令为对当前VR图像进行拍照。9.一种虚拟现实VR交互装置，其特征在于，该装置包括：眼睛动作检测模块：用于实时检测VR用户...

【专利技术属性】
技术研发人员：梁效富，魏冬，
申请(专利权)人：三星电子中国研发中心，三星电子株式会社，
类型：发明
国别省市：江苏;32