【技术实现步骤摘要】
【国外来华专利技术】
本公开总体上涉及用于实现用户界面(user interface，ui)控制的方法、系统、和装置，并且更具体地，涉及用于实现用于头戴式设备(head-mounted device，hmd)或具有摄像头输入的其他用户设备的腕式可穿戴控制器的方法、系统、和装置。
技术介绍
1、用于hmd或其他用户设备的大多数传统控制器都被设计为手持式控制设备。然而，这种传统的手持式控制设备总是占用用户的单手或双手以进行ui交互。虽然这种设备可能适用于虚拟现实(virtual reality，vr)游戏等，但是对于其他使用情况，例如增强现实(augmented reality，ar)或混合现实(mixed reality，mr)设备的日常使用或不方便携带额外手持控制器的户外使用情况，这些设备并不适用，也不方便用户使用。此外，在处于摄像头视角之外或存在视觉遮挡的情况下，这些传统控制器将无法准确提供手势识别。
2、因此，需要更为稳健和可扩展的解决方案以实现ui控制。
技术实现思路
1、本公开的技术一般涉及用于实现用户界面(user interface，ui)控制的工具和技术，并且更具体地，涉及用于实现用于头戴式设备(head-mounted device，hmd)或具有摄像头输入的其他用户设备的腕式可穿戴控制器的方法、系统、和装置。
2、在一方面，一种腕式可穿戴控制设备可以包括一个或多个第一传感器、一个或多个第二传感器、至少一个处理器、以及非暂时性计算机可读介质。一个或多个第一传感器用
3、在另一方面，一种方法可以包括使用计算系统分析第一传感器数据，以识别与用户的一个或多个手指的移动对应的第一手势，当腕式可穿戴控制设备被用户佩戴时，第一传感器数据从设置在腕式可穿戴控制设备上的一个或多个第一传感器被接收，一个或多个第一传感器用于在腕式可穿戴控制设备被用户佩戴时，在用户的任何手指均未接触腕式可穿戴控制设备的情况下检测用户的一个或多个手指的手势。该方法还可以包括：使用计算系统分析第二传感器数据，以检测腕式可穿戴控制设备相对于三个旋转轴中至少一个旋转轴的运动，当腕式可穿戴控制设备被用户佩戴时，第二传感器数据从设置在腕式可穿戴控制设备上的一个或多个第二传感器被接收；基于确定检测到的腕式可穿戴控制设备的运动和第一手势的结合对应于基于第一手势的命令，使用计算系统基于上述基于第一手势的命令生成第一指令，并将生成的第一指令发送到头戴式设备(hmd)或具有摄像头输入的其他用户设备，基于第一手势的命令用于控制hmd或其他用户设备的用户界面(ui)，第一指令用作控制hmd或其他用户设备的ui的输入。
4、在不脱离本公开范围的情况下，可以对所讨论的实施例进行各种修改和添加。例如，尽管上述实施例涉及特定特征，但本公开的范围还包括具有不同特征组合的实施例以及不包括所有上述特征的实施例。
5、本公开的一个或多个方面的细节在附图和以下描述中阐述。本公开中描述的技术的其他特征、目的和优点将从说明书和附图以及权利要求中显而易见。
本文档来自技高网...【技术保护点】
1.一种腕式可穿戴控制设备，包括：
2.根据权利要求1所述的腕式可穿戴控制设备，其中，所述腕式可穿戴控制设备包括基于腕表的可穿戴控制设备或基于腕带的可穿戴控制设备之一，所述基于腕表的可穿戴控制设备和所述基于腕带的可穿戴控制设备中的每一个包括一个或多个带部分，所述带部分通过连接器以使得所述腕式可穿戴控制设备可拆卸地缠绕在所述用户的手腕上的方式链接到相邻的带部分。
3.根据权利要求2所述的腕式可穿戴控制设备，其中，所述一个或多个第一传感器中的至少一个第一传感器和所述一个或多个第二传感器中的至少一个第二传感器设置在所述一个或多个带部分中的每个带部分内。
4.根据权利要求2所述的腕式可穿戴控制设备，其中，所述一个或多个第一传感器和所述一个或多个第二传感器各自设置在所述一个或多个带部分中的仅一个带部分内，其中，包含所述一个或多个第一传感器的带部分可以是以下之一：包含所述一个或多个第二传感器的同一带部分，或与包含所述一个或多个第二传感器的所述带部分不同的带部分。
5.根据权利要求2所述的腕式可穿戴控制设备，其中，所述一个或多个第一传感器中的至少
6.根据权利要求1-5中任一项所述的腕式可穿戴控制设备，其中，所述HMD或具有摄像头输入的所述其他用户设备包括以下之一：虚拟现实(VR)护目镜、增强现实(AR)护目镜、混合现实(MR)护目镜、支持VR的眼镜、支持AR的眼镜、支持MR的眼镜、安装在头戴式耳机中的支持VR的智能手机、安装在头戴式耳机中的支持AR的智能手机、安装在头戴式耳机中的支持MR的智能手机、具有内置摄像头的智能电视(TV)、具有外连摄像头的智能TV、具有内置摄像头的游戏机、具有外连摄像头的游戏机、具有内置摄像头的监视器、具有外连摄像头的监视器、或具有外连摄像头的投影仪。
7.根据权利要求1-6中任一项所述的腕式可穿戴控制设备，其中，所述一个或多个第一传感器各自包括至少一个生物传感器，所述至少一个生物传感器包括一个或多个光电容积描记(PPG)传感器、一个或多个肌电(EMG)传感器、一个或多个声音传感器、或一个或多个运动传感器中的至少一个，每个传感器用于检测与佩戴所述腕式可穿戴控制设备的所述用户的手腕内或附近的软组织运动对应的生物特征，其中，所述软组织包括所述用户的手腕内或附近的一个或多个肌肉、一个或多个肌腱、或一个或多个血管中的至少一个。
8.根据权利要求7所述的腕式可穿戴控制设备，其中，所述一个或多个PPG传感器用于光学地检测与所述用户的所述一个或多个手指的移动对应的所述用户的手腕处或附近的皮肤组织下方的所述一个或多个血管中的血容量变化，其中，所述一个或多个EMG传感器用于检测与所述用户的所述一个或多个手指的移动对应的所述用户的手腕处或附近的所述一个或多个肌肉的电活动，其中，所述一个或多个声音传感器用于检测与所述用户的所述一个或多个手指的移动对应的所述用户体内的声音，其中，所述一个或多个运动传感器用于检测与所述用户的所述一个或多个手指的移动对应的所述一个或多个肌肉、所述一个或多个肌腱、以及所述一个或多个血管的移动。
9.根据权利要求1-8中任一项所述的腕式可穿戴控制设备，其中，所述一个或多个第二传感器各自包括以下至少之一：惯性测量单元(IMU)传感器或基于陀螺仪的传感器。
10.根据权利要求1-9中任一项所述的腕式可穿戴控制设备，还包括：
11.根据权利要求10所述的腕式可穿戴控制设备，其中，所述多个朝外的灯包括以下至少之一：多个红外(IR)发光二极管(LED)或多个彩色LED。
12.根据权利要求1-11中任一项所述的腕式可穿戴控制设备，其中，所述基于第一手势的命令包括以下至少之一：基于滑动的命令、基于拖动的命令、轻击命令、双击命令、指向命令、基于捏的命令、基于握的命令、旋转命令、滚动命令、俯仰命令、或偏航命令，其中，所述第一指令包括以下至少之一：滚动命令、移动命令、选择命令、确认命令、突出显示命令、返回命令、取消命令、移动光标命令、或导航命令。
13.一种方法，包括：
14.根据权利要求13所述的方法，其中，所述计算系统包括以下至少之一：所述腕式可穿戴控制设备上的一个或多个处理器、与所述腕式可穿戴控制设备通信耦合的移动设备上的一个或多个处理器、机器学习系统、人工智能(AI)系统、深度学习系统、神经网络、卷积神经网络(CNN)、或全卷积网络(FCN)。
15.根据权利要求13或14所述的方法，其中，所述腕式可穿戴控制设备包括基于腕...
【技术特征摘要】
【国外来华专利技术】
1.一种腕式可穿戴控制设备，包括：
2.根据权利要求1所述的腕式可穿戴控制设备，其中，所述腕式可穿戴控制设备包括基于腕表的可穿戴控制设备或基于腕带的可穿戴控制设备之一，所述基于腕表的可穿戴控制设备和所述基于腕带的可穿戴控制设备中的每一个包括一个或多个带部分，所述带部分通过连接器以使得所述腕式可穿戴控制设备可拆卸地缠绕在所述用户的手腕上的方式链接到相邻的带部分。
3.根据权利要求2所述的腕式可穿戴控制设备，其中，所述一个或多个第一传感器中的至少一个第一传感器和所述一个或多个第二传感器中的至少一个第二传感器设置在所述一个或多个带部分中的每个带部分内。
4.根据权利要求2所述的腕式可穿戴控制设备，其中，所述一个或多个第一传感器和所述一个或多个第二传感器各自设置在所述一个或多个带部分中的仅一个带部分内，其中，包含所述一个或多个第一传感器的带部分可以是以下之一：包含所述一个或多个第二传感器的同一带部分，或与包含所述一个或多个第二传感器的所述带部分不同的带部分。
5.根据权利要求2所述的腕式可穿戴控制设备，其中，所述一个或多个第一传感器中的至少一个第一传感器设置在所述一个或多个带部分中的每个带部分内，而所述一个或多个第二传感器设置在所述一个或多个带部分中的仅一个带部分内。
6.根据权利要求1-5中任一项所述的腕式可穿戴控制设备，其中，所述hmd或具有摄像头输入的所述其他用户设备包括以下之一：虚拟现实(vr)护目镜、增强现实(ar)护目镜、混合现实(mr)护目镜、支持vr的眼镜、支持ar的眼镜、支持mr的眼镜、安装在头戴式耳机中的支持vr的智能手机、安装在头戴式耳机中的支持ar的智能手机、安装在头戴式耳机中的支持mr的智能手机、具有内置摄像头的智能电视(tv)、具有外连摄像头的智能tv、具有内置摄像头的游戏机、具有外连摄像头的游戏机、具有内置摄像头的监视器、具有外连摄像头的监视器、或具有外连摄像头的投影仪。
7.根据权利要求1-6中任一项所述的腕式可穿戴控制设备，其中，所述一个或多个第一传感器各自包括至少一个生物传感器，所述至少一个生物传感器包括一个或多个光电容积描记(ppg)传感器、一个或多个肌电(emg)传感器、一个或多个声音传感器、或一个或多个运动传感器中的至少一个，每个传感器用于检测与佩戴所述腕式可穿戴控制设备的所述用户的手腕内或附近的软组织运动对应的生物特征，其中，所述软组织包括所述用户的手腕内或附近的一个或多个肌肉、一个或多个肌腱、或一个或多个血管中的至少一个。
8.根据权利要求7所述的腕式可穿戴控制设备，其中，所述一个或多个ppg传感器用于光学地检测与所述用户的所述一个或多个手指的移动对应的所述用户的手腕处或附近的皮肤组织下方的所述一个或多个血管中的血容量变化，其中，所述一个或多个emg传感器用于检测与所述用户的所述一个或多个手指的移动对应的所述用户的手腕处或附近的所述一个或多个肌肉的电活动，其中，所述一个或多个声音传感器用于检测与所述用户的所述一个或多个手指的移动对应的所述用户体内的声音，其中，所述一个或多个运动传感器用于检测与所述用户的所述一个或多个手指的移动对应的所述一个或多个肌肉、所述一个或多个肌腱、以及所述一个或多个血管的移动。
9.根据权利要求1-8中任一项所述的腕式可穿戴控制设备，其中，所述一个或多个第二传感器各自包括以下至少之一：惯性测量单元(imu)传感器或基于陀螺仪的传感器。
10.根据权利要求1-9中任一项所述的腕式可穿戴控制设备，还包括：
11.根据权利...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。