显示系统及方法技术方案

本发明专利技术提供一种显示系统及方法，该系统包括可穿戴显示器、控制器、激光投射装置，可穿戴显示器分别与控制器以及激光投射装置连接，控制器与激光投射装置连接。控制器被配置为控制激光投射装置开启或关闭；激光投射装置被配置为在开启时将用户界面投射到真实空间，同时获取用户手指在用户界面的第一位置信息，并向可穿戴显示器发送第一位置信息；可穿戴显示器被配置为基于用户界面和第一位置信息，在虚拟场景中显示用户界面和操作光标。上述显示系统实现将真实场景的操作过程映射到虚拟场景中，解决了当前VR交互控制操作不便的问题。

【技术实现步骤摘要】
显示系统及方法
本专利技术涉及VR
，尤其涉及一种显示系统及方法。
技术介绍
随着头戴显示技术的日趋成熟，围绕虚拟显示设备的各项技术得到快速发展，包括虚拟现实(VirtualReality,VR)、增强现实(AugmentedReality,AR)、混合现实(MixReality,MR)。其中，VR技术是通过全方位摄像装置采集到的视频进行立体化处理，为用户提供视觉、听觉、触觉等感官模拟的类似于真实立体场景的虚拟世界，可广泛应用于教育培训、消防演练、虚拟驾驶、建筑展示等诸多领域。目前，VR设备现有的交互方式主要有如下几种：用户可借助特定的输入/输出设备与虚拟世界进行自然的交互，例如借助控制键盘、鼠标等传统外设进行文字输入；用户可通过语音控制VR设备，进行虚拟界面的切换等；用户可通过头部运动悬停控制光标位置移动、选择确认等操作；用户还可通过手臂运动操作虚拟界面。上述第一种方式用户在佩戴VR设备后是进行盲操作，输入操作较困难；上述第二种方式受地域差异的影响，语义识别效果不稳定，且此方式不适合聋哑人，有一定的局限性；上述第三种方式虽然简单，但悬停时间的长短不好定义，时间定义过短容易引起误操作，时间定义过长操作效率低；上述第四种方式用户手臂需在摄像头视野范围内，使用精度和灵活度比较差。
技术实现思路
本专利技术提供一种显示系统及方法，解决了当前VR交互控制操作不便的问题。本专利技术的第一方面提供一种显示系统，包括：可穿戴显示器、控制器、激光投射装置；所述可穿戴显示器分别与所述控制器以及所述激光投射装置连接，所述控制器与所述激光投射装置连接；所述控制器，被配置为控制所述激光投射装置开启或关闭；所述激光投射装置，被配置为在开启时将用户界面投射到真实空间，获取用户手指在所述用户界面的第一位置信息，并向所述可穿戴显示器发送所述第一位置信息；所述可穿戴显示器，被配置为基于所述用户界面和所述第一位置信息，在虚拟场景中显示所述用户界面和操作光标，所述操作光标用于指示用户手指在所述用户界面上的位置。在一些示例性的实施方式中，所述显示系统还包括图像采集装置，所述图像采集装置与所述可穿戴显示器连接；所述图像采集装置，被配置为获取用户手指在所述用户界面的第二位置信息，并向所述可穿戴显示器发送所述第二位置信息；所述可穿戴显示器，被配置为基于所述用户设备、所述第一位置信息以及所述第二位置信息，在虚拟场景中显示所述用户设备和所述操作光标。在一些示例性的实施方式中，所述图像采集装置，被配置为获取所述控制器的第三位置信息，并向所述可穿戴显示器发送所述第三位置信息；所述控制器还包括IMU惯性传感器，所述IMU被配置为获取所述控制器的姿态信息；所述可穿戴显示器，被配置为基于所述用户界面、所述第一位置信息、所述第二位置信息、所述第三位置信息以及所述姿态信息，在虚拟场景中显示所述控制器、投射在所述控制器的投射幕布上的用户界面和操作光标。在一些示例性的实施方式中，所述控制器包括投影幕布；所述激光投射装置，被配置为将所述用户界面投射到所述投影幕布上。在一些示例性的实施方式中，所述控制器包括物理按键，所述控制器被配置为响应于用户在所述物理按键上的按压操作，控制所述激光投射装置开启或关闭。在一些示例性的实施方式中，所述控制器包括马达；所述控制器，被配置为响应于用户手指在所述用户界面的控制操作，控制所述马达振动。在一些示例性的实施方式中，所述激光投射装置包括红外激光发射器、红外摄像头以及一字线性感应激光头；所述红外激光发射器，被配置为将所述用户界面投射到真实空间；所述红外摄像头和所述一字线性感应激光头，被配置为获取用户手指在所述用户界面的第一位置信息。在一些示例性的实施方式中，所述用户界面包括如下的至少一项：虚拟键盘、系统主界面、菜单界面、绘图界面。本专利技术的第二方面提供一种显示方法，包括：控制器响应于用户发出的控制命令，控制激光投射装置开启；所述激光投射装置将用户界面投射到真实空间，获取用户手指在所述用户界面的第一位置信息，并向所述可穿戴显示器发送所述第一位置信息；所述可穿戴显示器基于所述用户界面和所述第一位置信息，在虚拟场景中显示所述用户界面和操作光标，所述操作光标用于指示用户手指在所述用户界面上的位置。在一些示例性的实施方式中，所述方法还包括：图形采集装置获取用户手指在用户界面的第二位置信息，并向所述可穿戴显示器发送所述第二位置信息；所述可穿戴显示器基于所述用户界面和所述第一位置信息，在虚拟场景中显示所述用户界面和操作光标，包括：所述可穿戴显示器基于所述用户设备、所述第一位置信息以及所述第二位置信息，在虚拟场景中显示所述用户界面和所述操作光标。在一些示例性的实施方式中，所述方法还包括：所述图像采集装置获取所述控制器的第三位置信息，并向所述可穿戴显示器发送所述第三位置信息；所述控制器的IMU获取所述控制器的姿态信息；所述可穿戴显示器基于所述用户界面和所述第一位置信息，在虚拟场景中显示所述用户界面和操作光标，包括：所述可穿戴显示器基于所述用户界面、所述第一位置信息、所述第二位置信息、所述第三位置信息以及所述姿态信息，在虚拟场景中显示所述控制器、投射在所述控制器的投射幕布上的用户界面和操作光标。在一些示例性的实施方式中，所述激光投射装置将用户界面投射到真实空间，包括：所述激光投射装置将所述用户界面投射到所述控制器的投影幕布上。在一些示例性的实施方式中，所述控制器响应于用户在所述控制器的物理按键上的按压操作，控制所述激光投射装置开启或关闭。在一些示例性的实施方式中，所述方法还包括：所述控制器响应于用户手指在所述用户界面的控制操作，控制所述控制器上的马达振动。本专利技术的第三方面提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，当处理器执行所述计算机执行指令时，实现如本专利技术第二方面中任一项所述的显示方法。本专利技术提供一种显示系统及方法。其中，显示系统包括可穿戴显示器、控制器、激光投射装置，可穿戴显示器分别与控制器以及激光投射装置连接，控制器与激光投射装置连接。控制器被配置为控制激光投射装置开启或关闭；激光投射装置被配置为在开启时将用户界面投射到真实空间，同时获取用户手指在用户界面的第一位置信息，并向可穿戴显示器发送第一位置信息；可穿戴显示器被配置为基于用户界面和第一位置信息，在虚拟场景中显示用户界面和操作光标。上述显示系统实现将真实场景的操作过程映射到虚拟场景中，解决了当前VR交互控制操作不便的问题。附图说明图1为本专利技术实施例提供的应用场景示意图；图2为本专利技术实施例提供的一种显示系统的结构示意图；图3为本专利技术实施例提供的一种可穿戴显示器的结构示意图；图4为本专利技术实施例提供的一种激光投射装置的结构示意图；图本文档来自技高网...

【技术保护点】
1.一种显示系统，其特征在于，包括：可穿戴显示器、控制器、激光投射装置；所述可穿戴显示器分别与所述控制器以及所述激光投射装置连接，所述控制器与所述激光投射装置连接；/n所述控制器，被配置为控制所述激光投射装置开启或关闭；/n所述激光投射装置，被配置为在开启时将用户界面投射到真实空间，获取用户手指在所述用户界面的第一位置信息，并向所述可穿戴显示器发送所述第一位置信息；/n所述可穿戴显示器，被配置为基于所述用户界面和所述第一位置信息，在虚拟场景中显示所述用户界面和操作光标，所述操作光标用于指示用户手指在所述用户界面上的位置。/n

【技术特征摘要】
1.一种显示系统，其特征在于，包括：可穿戴显示器、控制器、激光投射装置；所述可穿戴显示器分别与所述控制器以及所述激光投射装置连接，所述控制器与所述激光投射装置连接；
所述控制器，被配置为控制所述激光投射装置开启或关闭；
所述激光投射装置，被配置为在开启时将用户界面投射到真实空间，获取用户手指在所述用户界面的第一位置信息，并向所述可穿戴显示器发送所述第一位置信息；
所述可穿戴显示器，被配置为基于所述用户界面和所述第一位置信息，在虚拟场景中显示所述用户界面和操作光标，所述操作光标用于指示用户手指在所述用户界面上的位置。


2.根据权利要求1所述的显示系统，其特征在于，所述显示系统还包括图像采集装置，所述图像采集装置与所述可穿戴显示器连接；
所述图像采集装置，被配置为获取用户手指在所述用户界面的第二位置信息，并向所述可穿戴显示器发送所述第二位置信息；
所述可穿戴显示器，被配置为基于所述用户设备、所述第一位置信息以及所述第二位置信息，在虚拟场景中显示所述用户设备和所述操作光标。


3.根据权利要求2所述的显示系统，其特征在于，所述图像采集装置，被配置为获取所述控制器的第三位置信息，并向所述可穿戴显示器发送所述第三位置信息；
所述控制器还包括IMU惯性传感器，所述IMU被配置为获取所述控制器的姿态信息；
所述可穿戴显示器，被配置为基于所述用户界面、所述第一位置信息、所述第二位置信息、所述第三位置信息以及所述姿态信息，在虚拟场景中显示所述控制器、投射在所述控制器的投射幕布上的用户界面和操作光标。


4.根据权利要求1-3中任一项所述的显示系统，其特征在于，所述控制器包括投影幕布；所述激光投射装置，被配置为将所述用户界面投射到所述投影幕布上。


5.根据权利要求1-3中任一项所...

【专利技术属性】
技术研发人员：王冉冉，杨宇，周鸣岐，赵玉峰，
申请(专利权)人：海信视像科技股份有限公司，
类型：发明
国别省市：山东;37