手部虚拟饰品试戴的人机交互方法和系统技术方案

本发明专利技术公开了一种手部虚拟饰品试戴的人机交互方法和系统，实现的是提高客户购买饰品的购买体验的技术效果。方法包括：分别导入手部三维模型和饰品三维模型，并将饰品三维模型显示于手部三维模型的指定位置上；接收深度传感器在其感知空间内获取的手部的深度信息，并基于手部的深度信息，调用物理引擎调整手部三维模型与饰品三维模型的显示。构建饰品的三维模型以及客户手部的手部三维模型，将饰品三维模型佩戴于手部三维模型上，并通过佩戴手和交互手的相对运动，结合物理引擎实现虚拟控制饰品三维模型的位置或角度的变化，模拟真实试戴中调整手部和饰品的位置和角度，在客户不能真实试戴饰品时，实现真实试戴饰品的效果。

【技术实现步骤摘要】

本专利技术涉及虚拟现实
，尤其涉及一种手部虚拟饰品试戴的人机交互方法和系统。
技术介绍
购买饰品时，客户除了观察饰品的样式，更需要试戴饰品，以确定饰品的大小是否合适，以及佩戴的效果是否满意。对于贵重的饰品，将饰品拿出柜台供客户试戴时存在安全性的问题；因此，更多的贵重饰品并不存放于柜台，而是出示饰品的图片或者视频供客户观看，在客户有意购买时，再带领客户去饰品的存储地，通常是具有保险柜的安防较严格的地方专门试戴，这不但降低了客户的购买体验，也增加了商家的人力消耗成本。或者，即使不是贵重的饰品，由于商家的饰品款式众多，不可能全部摆在柜台上，也只能用图片或者视频的方式供客户挑选；尤其是在互联网普及的现今，通过网络出售饰品的销售方式增多，这种销售方式中，通常也是展示饰品的图片，或者展示模特佩戴饰品的佩戴效果图，客户通过图片资料和一些尺寸信息来衡量是否购买饰品，而这种方式购买回来的饰品通常会存在佩戴不合适、效果不满意的问题，这都降低了客户的购买体验。
技术实现思路
本专利技术的目的是提供一种手部虚拟饰品试戴的人机交互方法和系统，实现的是提高客户购买饰品的购买体验的技术效果。本专利技术的目的是通过以下技术方案实现的: 提出一种手部虚拟饰品试戴的人机交互方法，包括:分别导入手部三维模型和饰品三维模型；将所述饰品三维模型显示于所述手部三维模型的指定位置上；接收深度传感器在其感知空间内获取的手部的深度信息；基于所述手部的深度信息，调用物理引擎调整所述手部三维模型和所述饰品三维模型的显示。进一步的，在分别导入并显示手部三维模型和饰品三维模型之前，所述方法包括:分别构建所述手部三维模型和所述饰品三维模型；设置所述手部三维模型和所述饰品三维模型的属性；分别在所述手部三维模型和所述饰品三维模型上设置碰撞器；设定碰撞器的碰撞条件，和建立所述手部三维模型与所述饰品三维模型的参数。进一步的，所述调用物理引擎调整所述手部三维模型和所述饰品三维模型的显示，具体为:根据所述手部的深度信息的变化，同步所述手部三维模型的显示；调用所述物理引擎模拟所述手部三维模型与所述饰品三维模型之间的摩擦和碰撞，使得所述饰品三维模型与所述手部三维模型同步显示。进一步的，所述手部三维模型包括佩戴手三维模型和交互手三维模型；则基于所述手部的深度信息，调用物理引擎调整所述手部三维模型和所述饰品三维模型的显示，具体为:基于所述手部的深度信息，判断所述佩戴手三维模型的状态是否发生变化；若否，基于所述手部的深度信息，判断所述佩戴手三维模型与所述交互手三维模型是否存在相互运动；若是，向所述饰品三维模型施力，并调用所述物理引擎模拟所述手部三维模型与所述饰品三维模型之间的摩擦和碰撞，使得所述饰品三维模型相对所述手部三维模型移动。进一步的，所述基于所述手部的深度信息，判断所述佩戴手三维模型与所述交互手三维模型是否存在相对运动，具体为:基于所述手部的深度信息，得到所述佩戴手三维模型中手指或手腕的方向信息；判断所述交互手三维模型是否相对于所述佩戴手三维模型中手指或手腕的方向平移移动；若是，则所述调用物理引擎调整所述手部三维模型和所述饰品三维模型的显示，，具体为:向所述饰品三维模型施力，并调用所述物理引擎模拟所述手部三维模型与所述饰品三维模型之间的摩擦和碰撞，使得所述饰品三维模型相对所述佩戴手三维模型中手指或手腕上的方向平移移动。进一步的，所述基于所述手部的深度信息，判断所述佩戴手三维模型与所述交互手三维模型是否存在相对运动，具体为:基于所述手部的深度信息，得到所述佩戴手三维模型中手指或手腕的方向信息；判断所述交互手三维模型是否相对于所述佩戴手三维模型中的手指或手腕进行旋转；若是，则所述调用物理引擎调整所述手部三维模型和所述饰品三维模型的显示，具体为:向所述饰品三维模型施力，并调用所述物理引擎模拟所述手部三维模型与所述饰品三维模型之间的摩擦和碰撞，使得所述饰品三维模型相对所述佩戴手三维模型中手指或手腕旋转。提出一种手部虚拟饰品试戴的人机交互系统，包括深度传感器、导入单元、显示单元、物理引擎和控制单元；所述导入单元，用于导入手部三维模型和饰品三维模型；所述深度传感器，用于在其感知空间内获取手部的深度信息；所述控制单元，用于将所述饰品三维模型显示于所述手部三维模型的指定位置上；并接收和基于手部的深度信息，调用所述物理引擎调整所述手部三维模型和所述饰品三维模型的显示；所述物理引擎，用于模拟所述手部三维模型和所述饰品三维模型之间的摩擦和碰撞；所述显示单元，用于显示所述手部三维模型和所述饰品三维模型。进一步的，所述系统还包括构建单元和设置单元；所述构建单元，用于在所述导入单元导入所述手部三维模型和所述饰品三维模型之前，构建所述手部三维模型和所述饰品三维模型；所述设置单元，设置所述手部三维模型和所述饰品三维模型的属性，并分别在所述手部三维模型和所述饰品三维模型上设置碰撞器，并设定碰撞器的碰撞条件，和建立所述手部三维模型与所述饰品三维模型的参数。进一步的，所述控制单元调用物理引擎调整所述手部三维模型和所述饰品三维模型的显示，具体为:根据所述手部的深度信息的变化，同步所述手部三维模型的显示；调用所述物理引擎模拟所述手部三维模型与所述饰品三维模型之间的摩擦和碰撞，使得所述饰品三维模型与所述手部三维模型同步显示。进一步的，所述构建单元构建的手部三维模型包括佩戴手三维模型和交互手三维模型；则所述控制单元基于所述手部的深度信息，调用物理引擎调整所述手部三维模型和所述饰品三维模型的显示，具体为:基于所述手部的深度信息，判断所述佩戴手三维模型的状态是否发生变化；若否，基于所述手部的深度信息，判断所述佩戴手三维模型与所述交互手三维模型是否存在相互运动；若是，向所述饰品三维模型施力，并调用所述物理引擎模拟所述手部三维模型与所述饰品三维模型之间的摩擦和碰撞，使得所述饰品三维模型相对所述手部三维模型移动。进一步的，所述控制单元基于所述手部的深度信息，判断所述佩戴手三维模型与所述交互手三维模型是否存在相对运动，具体为:基于所述手部的深度信息，得到所述佩戴手三维模型中手指或手腕的方向信息；判断所述交互手三维模型是否相对于所述佩戴手三维模型中手指或手腕的方向平移移动；若是，则向所述饰品三维模型施力，并调用所述物理引擎模拟所述手部三维模型与所述饰品三维模型之间的摩擦和碰撞，使得所述饰品三维模型相对所述佩戴手三维模型中手指或手腕上的方向平移移动。进一步的，所述控制单元基于所述手部的深度信息，判断所述佩戴手三维模型与所述交互手三维模型是否存在相对运动，具体为:基于所述手部的深度信息，得到所述佩戴手三维模型中手指或手腕的方向信息；判断所述交互手三维模型是否相对于所述佩戴手三维模型中手指或手腕进行旋转；若是，则向所述饰品三维模型施力，并调用所述物理引擎模拟所述手部三维模型与所述饰品三维模型之间的摩擦和碰撞，使得所述饰品三维模型相对所述佩戴手三维模型中手指或手腕旋转。本专利技术提供的技术方案的有益效果或者优点是:采用手部虚拟饰品试戴的方式，在诸如电脑等智能主控设备中，构建饰品以及客户虚拟的手部三维模型和饰品三维模型，在客户想要试戴某个饰品时，导入并显示饰品的饰品三维模型以及客户手部的手部三维模型，并控制将虚拟饰品佩戴于虚拟本文档来自技高网...

【技术保护点】
手部虚拟饰品试戴的人机交互方法，其特征在于，包括：分别导入手部三维模型和饰品三维模型；将所述饰品三维模型显示于所述手部三维模型的指定位置上；接收深度传感器在其感知空间内获取的手部的深度信息；基于所述手部的深度信息，调用物理引擎调整所述手部三维模型和所述饰品三维模型的显示。

【技术特征摘要】

【专利技术属性】
技术研发人员：周谆，
申请(专利权)人：周谆，
类型：发明
国别省市：山东;37