【技术实现步骤摘要】
本公开涉及手势识别，尤其是一种确定手部关键点三维坐标值的方法、装置、设备和介质。
技术介绍
1、在头戴显示设备(例如ar眼镜、vr眼镜等)的人机交互等场景，用户可以通过手势实现一些功能，比如通过手势实现游戏控制。手势的识别通常基于手部关键点的三维坐标值实现。
技术实现思路
1、第一方面，本公开实施例提供了一种确定手部关键点三维坐标值的方法，包括：获取包含用户手部的单目图像；将单目图像输入检测网络，得到用户的手部估计信息；其中，检测网络是根据预设标准手模训练的；用户的手部估计信息包括：对于用户手部估计的二维关键点、及对于预设标准手模估计的关键点相对于根节点的相对深度；根据用户的手部估计信息以及预先确定的用户的手部基准信息，确定用户的手部三维关键点的三维坐标估计值；其中，预先确定的用户的手部基准信息包括用户的手部相较于预设标准手模的缩放比例；对用户的手部三维关键点的三维坐标估计值进行优化，得到用户的手部三维关键点的三维坐标值。
2、第二方面，本公开实施例提供了一种确定手部关键点三维坐标值的装置，包括：图像获取模块，用于获取包含用户手部的单目图像；检测模块，用于将单目图像输入检测网络，得到用户的手部估计信息；其中，检测网络是根据预设标准手模训练的；用户的手部估计信息包括：对于用户手部估计的二维关键点、及对于预设标准手模估计的关键点相对于根节点的相对深度；三维坐标估计模块，用于根据用户的手部估计信息以及预先确定的用户的手部基准信息，确定用户的手部三维关键点的三维坐标估计值；其中
3、第三方面，本公开实施例提供了一种计算机可读存储介质，该存储介质存储有计算机程序，该计算机程序用于执行本公开上述任一实施例提供的确定手部关键点三维坐标值的方法。
4、第四方面，本公开实施例提供了一种电子设备，该电子设备包括：处理器；用于存储处理器可执行指令的存储器；处理器，用于从存储器中读取可执行指令，并执行该指令以实现本公开上述任一实施例提供的确定手部关键点三维坐标值的方法。
5、第五方面，本公开实施例提供了一种头戴显示设备，该头戴显示设备包括：
6、处理器；用于存储处理器可执行指令的存储器；处理器，用于从存储器中读取可执行指令，并执行指令以实现本公开上述任一实施例提供的确定手部关键点三维坐标值的方法。
7、下面通过附图和实施例，对本公开的技术方案做进一步的详细描述。
本文档来自技高网...【技术保护点】
1.一种确定手部关键点三维坐标值的方法，包括：
2.根据权利要求1所述的方法，其中，所述缩放比例基于所述用户的手指骨节基准长度和预设标准手模的手指骨节长度确定。
3.根据权利要求2所述的方法，其中，在所述获取包含用户手部的单目图像的步骤之前，所述方法还包括：
4.根据权利要求1或2所述的方法，其中，所述根据所述用户的手部估计信息以及预先确定的所述用户的手部基准信息，确定所述用户的手部三维关键点的三维坐标估计值，包括：
5.根据权利要求4所述的方法，其中，所述根据所述用户手部的关键点相对于根节点的相对深度、以及用户手部的根节点的深度，确定所述用户的手部三维关键点的三维坐标估计值，包括：
6.根据权利要求4所述的方法，其中，所述预先确定的所述用户的手部基准信息还包括用户的手指骨节基准长度；
7.根据权利要求6所述的方法，其中，所述基于所述用户的手指骨节长度估计值和所述用户的手指骨节基准长度构建优化问题，得到所述用户手部的根节点的深度的最优估计，包括：
8.根据权利要求6所述的方法，其中，所述对所述用户
9.根据权利要求6-8中任一项所述的方法，其中，所述用户的手部估计信息还包括：对于用户手部估计的二维关键点的得分；
10.根据权利要求6-9中任一项所述的方法，其中，根据所述用户手部的根节点的深度的最优估计，得到所述用户的手部三维关键点的三维坐标值，包括：
11.一种确定手部关键点三维坐标值的装置，包括：
12.一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序用于执行上述权利要求1-10任一所述的确定手部关键点三维坐标值的方法。
13.一种电子设备，所述电子设备包括：
14.一种头戴显示设备，所述头戴显示设备包括：
...【技术特征摘要】
1.一种确定手部关键点三维坐标值的方法，包括：
2.根据权利要求1所述的方法，其中，所述缩放比例基于所述用户的手指骨节基准长度和预设标准手模的手指骨节长度确定。
3.根据权利要求2所述的方法，其中，在所述获取包含用户手部的单目图像的步骤之前，所述方法还包括：
4.根据权利要求1或2所述的方法，其中，所述根据所述用户的手部估计信息以及预先确定的所述用户的手部基准信息，确定所述用户的手部三维关键点的三维坐标估计值，包括：
5.根据权利要求4所述的方法，其中，所述根据所述用户手部的关键点相对于根节点的相对深度、以及用户手部的根节点的深度，确定所述用户的手部三维关键点的三维坐标估计值，包括：
6.根据权利要求4所述的方法，其中，所述预先确定的所述用户的手部基准信息还包括用户的手指骨节基准长度；
7.根据权利要求6所述的方法，其中，所述基于所述用户的手指骨节长度估计值和所述用...
【专利技术属性】
技术研发人员：胡耀凯，
申请(专利权)人：优奈柯恩北京科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。