VR交互方法、系统、移动终端及计算机可读存储介质技术方案

本发明专利技术提供了一种VR交互方法、系统、移动终端及计算机可读存储介质，该方法包括：根据VR交互指令确定待交互场景，对待交互场景进行三维图像投影，得到VR交互场景；对VR交互场景内的用户进行动作特征采集，得到动作采集特征，对动作采集特征进行时序同步处理，得到动作时序特征，动作时序特征包括骨架时序特征和力度时序特征；根据骨架时序特征确定用户的体感姿势，根据力度时序特征确定对应体感姿势的姿势力度；根据体感姿势和姿势力度生成VR交互信息，根据VR交互信息对VR交互场景执行VR交互操作。本发明专利技术中用户可以直接基于操作姿势的方式进行VR交互，无需采用操作手柄的方式进行VR交互，提高了用户的使用体验。提高了用户的使用体验。提高了用户的使用体验。

【技术实现步骤摘要】
VR交互方法、系统、移动终端及计算机可读存储介质


[0001]本专利技术属于VR领域，尤其涉及一种VR交互方法、系统、移动终端及计算机可读存储介质。

技术介绍

[0002]虚拟现实(Virtual Reality，VR)技术是一种基于可计算信息构造沉浸式人机交互环境的信息技术，采用计算机产生一种人为虚拟的环境，生成一个以视觉感受为主，包括听觉、触觉的综合感知的人工环境，人们可以通过视觉、听觉、触觉和加速度等多种感觉通道感知计算机虚拟的虚拟世界，也可以通过移动、语音、表情、手势及视线等最自然的方式和虚拟世界交互，从而产生身临其境的体验。
[0003]现有的VR交互过程中，用户均是基于操作手柄的方式对VR交互场景进行交互，当用户需要输入的交互操作步骤复杂时，导致用户对操作手柄的操作繁琐，降低了用户的使用体验。

技术实现思路

[0004]本专利技术实施例的目的在于提供一种VR交互方法、系统、移动终端及计算机可读存储介质，旨在解决现有的VR交互过程中，用户对操作手柄的操作繁琐，所导致的用户使用体验低下的问题。
[0005]本专利技术实施例是这样实现的，一种VR交互方法，所述方法包括：
[0006]根据用户发送的VR交互指令确定待交互场景，并对所述待交互场景进行三维图像投影，得到VR交互场景；
[0007]对所述VR交互场景内的所述用户进行动作特征采集，得到动作采集特征，并对所述动作采集特征进行时序同步处理，得到动作时序特征，所述动作采集特征包括骨架位置特征和动作力度特征，所述动作时序特征包括骨架时序特征和力度时序特征；
[0008]根据所述骨架时序特征确定所述用户的体感姿势，并根据所述力度时序特征确定对应所述体感姿势的姿势力度；
[0009]根据所述体感姿势和所述姿势力度生成VR交互信息，并根据所述VR交互信息对所述VR交互场景执行VR交互操作。
[0010]优选地，所述对所述VR交互场景内的所述用户进行动作特征采集，得到动作采集特征，包括：
[0011]对所述VR交互场景内的所述用户进行图像采集，得到采集图像，并对所述采集图像进行特征提取，得到图像特征；
[0012]根据所述图像特征进行姿态预估，得到所述骨架位置特征，所述骨架位置特征包括不同骨架关键点与对应位置坐标之间的对应关系；
[0013]对所述VR交互场景内的所述用户进行力触觉采集，得到力触觉采集信号，并根据所述力触觉采集信号确定所述用户的动作力度值，得到所述动作力度特征，所述动作力度
特征包括所述用户上不同动作力度采集点与对应动作力度值之间的对应关系。
[0014]优选地，所述对所述动作采集特征进行时序同步处理，得到动作时序特征，包括：
[0015]分别确定所述图像采集和所述力触觉采集的采集频率，并根据确定到的所述采集频率确定目标时序，所述目标时序包括所述采集图像与所述力触觉采集信号之间相同的采集时间点；
[0016]根据所述目标时序，分别对所述骨架位置特征和所述动作力度特征进行特征筛选，并根据所述采集时间点，对特征筛选后的所述骨架位置特征和所述动作力度特征分别进行排序，得到所述骨架时序特征和所述力度时序特征。
[0017]优选地，所述根据所述骨架时序特征确定所述用户的体感姿势，包括：
[0018]根据所述骨架时序特征，确定每个所述骨架关键点的移动轨迹，并将不同所述骨架关键点的移动轨迹进行组合，得到组合轨迹；
[0019]将所述组合轨迹与预存储的体感姿势查询表进行匹配，以得到所述组合轨迹对应的所述体感姿势，所述体感姿势查询表中存储有不同组合轨迹与体感姿势之间的对应关系。
[0020]优选地，所述根据所述体感姿势和所述姿势力度生成VR交互信息，包括：
[0021]确定所述体感姿势的姿势时长，并将所述体感姿势的姿势时长、姿势标识和所述姿势力度与预存储的交互信息查询表进行匹配，得到所述VR交互信息，所述交互信息查询表中存储有不同姿势时长、不同姿势标识、不同姿势力度与对应VR交互信息之间的对应关系。
[0022]优选地，所述根据所述VR交互信息对所述VR交互场景执行VR交互操作，包括：
[0023]获取所述VR交互场景的场景标识，并根据所述场景标识和所述VR交互信息确定场景渐变信息，所述场景渐变信息包括所述场景标识和所述VR交互信息对应的VR渐变图像和交互响应；
[0024]根据所述场景渐变信息中的VR渐变图像对所述VR交互场景进行图像渐变操作，并根据所述场景渐变信息中的交互响应对所述用户进行信息响应。
[0025]优选地，所述对所述VR交互场景内的所述用户进行图像采集，得到采集图像之后，还包括：
[0026]根据预设腐蚀算子对所述采集图像进行卷积处理，以及确定卷积处理后的所述采集图像中，所述腐蚀算子对应的映射区域；
[0027]获取所述映射区域中像素点的最小值，并将所述像素点的最小值对所述采集图像中的指定像素点进行替换。
[0028]本专利技术实施例的另一目的在于提供一种VR交互系统，所述系统包括：
[0029]图像投影模块，用于根据用户发送的VR交互指令确定待交互场景，并对所述待交互场景进行三维图像投影，得到VR交互场景；
[0030]特征采集模块，用于对所述VR交互场景内的所述用户进行动作特征采集，得到动作采集特征，并对所述动作采集特征进行时序同步处理，得到动作时序特征，所述动作采集特征包括骨架位置特征和动作力度特征，所述动作时序特征包括骨架时序特征和力度时序特征；
[0031]体感姿势确定模块，用于根据所述骨架时序特征确定所述用户的体感姿势，并根
据所述力度时序特征确定对应所述体感姿势的姿势力度；
[0032]VR交互模块，用于根据所述体感姿势和所述姿势力度生成VR交互信息，并根据所述VR交互信息对所述VR交互场景执行VR交互操作。
[0033]本专利技术实施例的另一目的在于提供一种移动终端，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现以下步骤：
[0034]根据用户发送的VR交互指令确定待交互场景，并对所述待交互场景进行三维图像投影，得到VR交互场景；
[0035]对所述VR交互场景内的所述用户进行动作特征采集，得到动作采集特征，并对所述动作采集特征进行时序同步处理，得到动作时序特征，所述动作采集特征包括骨架位置特征和动作力度特征，所述动作时序特征包括骨架时序特征和力度时序特征；
[0036]根据所述骨架时序特征确定所述用户的体感姿势，并根据所述力度时序特征确定对应所述体感姿势的姿势力度。
[0037]本专利技术实施例的另一目的在于提供一种用于VR交互的计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现以下步骤：根据用户发送的VR交互指令确定待交互场景，并对所述待交互场景进行三维图像投影，得到VR交互场景；
本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种VR交互方法，其特征在于，所述方法包括：根据用户发送的VR交互指令确定待交互场景，并对所述待交互场景进行三维图像投影，得到VR交互场景；对所述VR交互场景内的所述用户进行动作特征采集，得到动作采集特征，并对所述动作采集特征进行时序同步处理，得到动作时序特征，所述动作采集特征包括骨架位置特征和动作力度特征，所述动作时序特征包括骨架时序特征和力度时序特征；根据所述骨架时序特征确定所述用户的体感姿势，并根据所述力度时序特征确定对应所述体感姿势的姿势力度；根据所述体感姿势和所述姿势力度生成VR交互信息，并根据所述VR交互信息对所述VR交互场景执行VR交互操作。2.如权利要求1所述的VR交互方法，其特征在于，所述对所述VR交互场景内的所述用户进行动作特征采集，得到动作采集特征，包括：对所述VR交互场景内的所述用户进行图像采集，得到采集图像，并对所述采集图像进行特征提取，得到图像特征；根据所述图像特征进行姿态预估，得到所述骨架位置特征，所述骨架位置特征包括不同骨架关键点与对应位置坐标之间的对应关系；对所述VR交互场景内的所述用户进行力触觉采集，得到力触觉采集信号，并根据所述力触觉采集信号确定所述用户的动作力度值，得到所述动作力度特征，所述动作力度特征包括所述用户上不同动作力度采集点与对应动作力度值之间的对应关系。3.如权利要求2所述的VR交互方法，其特征在于，所述对所述动作采集特征进行时序同步处理，得到动作时序特征，包括：分别确定所述图像采集和所述力触觉采集的采集频率，并根据确定到的所述采集频率确定目标时序，所述目标时序包括所述采集图像与所述力触觉采集信号之间相同的采集时间点；根据所述目标时序，分别对所述骨架位置特征和所述动作力度特征进行特征筛选，并根据所述采集时间点，对特征筛选后的所述骨架位置特征和所述动作力度特征分别进行排序，得到所述骨架时序特征和所述力度时序特征。4.如权利要求2所述的VR交互方法，其特征在于，所述根据所述骨架时序特征确定所述用户的体感姿势，包括：根据所述骨架时序特征，确定每个所述骨架关键点的移动轨迹，并将不同所述骨架关键点的移动轨迹进行组合，得到组合轨迹；将所述组合轨迹与预存储的体感姿势查询表进行匹配，以得到所述组合轨迹对应的所述体感姿势，所述体感姿势查询表中存储有不同组合轨迹与体感姿势之间的对应关系。5.如权利要求1所述的VR交互方法，其特征在于，所述根据所述体感姿势和所述姿势力度生成VR交互信息，包括：确定所述体感姿势的姿势时长，并将所述体感姿势的姿势时长、姿势标识和所述姿势力度与预存储的交互信息查询表进行匹配，得到所述VR交互信息，所述交互信息查询表中存储有不同姿势时长、不同姿势标识、不同姿势力度与对应VR交互信息之间的对应关系。6.如权利要求5所述的VR交互方法，其特征在于，所述根据所述VR交互信息对所述VR交
互场...

【专利技术属性】
技术研发人员：张韶华，贺波，张波，李放，王杰，郝宗良，赵柏涛，王海涛，杨西银，温炜，汪江，马雯雯，丁旭元，
申请(专利权)人：国网宁夏电力有限公司培训中心，
类型：发明
国别省市：