System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 视线估计方法、装置、电子设备及存储介质制造方法及图纸_技高网

视线估计方法、装置、电子设备及存储介质制造方法及图纸

技术编号:44087502 阅读:13 留言:0更新日期:2025-01-21 12:24
本公开涉及视线估计方法、装置、电子设备及存储介质,其方法包括:获取校准图像和待估计图像;校准图像对应已知的视线方向;获取校准图像对应的第一佩戴因子和待估计图像对应的第二佩戴因子,第一佩戴因子表征目标对象佩戴目标设备时的第一佩戴状态,第二佩戴因子表征目标对象在佩戴目标设备时的第二佩戴状态;获取校准图像与待估计图像之间估计的视线差值,并基于第一佩戴因子和第二佩戴因子获取在第一佩戴状态和第二佩戴状态共同影响下的视线差估计偏差;基于校准图像的视线方向、视线差值和视线差估计偏差,获得待估计图像的视线方向。这样可以修正获得的校准图像与待估计图像之间的视线差值,提高待估计图像的视线方向的计算准确度。

【技术实现步骤摘要】

本公开涉及计算机,尤其涉及视线估计方法、装置、电子设备及存储介质


技术介绍

1、视线是揭示人理解外界环境方式的重要线索,基于视线的视线估计技术,是指通过拍摄到的用户面部图像,计算用户的视线方向的技术。视线估计技术在人机交互、虚拟现实、增强现实、医学分析等领域得到了诸多应用。

2、在用户佩戴相关设备时,例如ar(augmented reality,增强现实)、vr(virtualreality,虚拟现实)或mr(mixed reality,混合现实)等设备时,可以采集到用户的眼部图像,在直接对眼部图像进行视线估计时,估计出的视线方向可能不准确。


技术实现思路

1、本公开提供了一种视线估计方法、装置、电子设备及存储介质。

2、根据本公开的一方面,提供了一种视线估计方法,所述方法包括:

3、获取校准图像和待估计图像;所述校准图像对应已知的视线方向;

4、获取所述校准图像对应的第一佩戴因子和所述待估计图像对应的第二佩戴因子,所述第一佩戴因子表征目标对象佩戴目标设备时的第一佩戴状态,所述第二佩戴因子表征所述目标对象在佩戴目标设备时的第二佩戴状态;

5、获取所述校准图像与所述待估计图像之间估计的视线差值,并基于所述第一佩戴因子和所述第二佩戴因子获取在所述第一佩戴状态和所述第二佩戴状态共同影响下的视线差估计偏差;

6、基于所述校准图像的视线方向、所述视线差值和所述视线差估计偏差,获得所述待估计图像的视线方向。

7、根据本公开的另一方面,提供了一种视线估计装置,所述装置包括:

8、图像获取模块,用于获取校准图像和待估计图像;校准图像对应已知的视线方向;

9、佩戴因子获取模块,用于获取所述校准图像对应的第一佩戴因子和所述待估计图像对应的第二佩戴因子,所述第一佩戴因子表征目标对象佩戴目标设备时的第一佩戴状态,所述第二佩戴因子表征所述目标对象在佩戴目标设备时的第二佩戴状态;

10、差值获取模块,用于获取所述校准图像与所述待估计图像之间估计的视线差值,并基于所述第一佩戴因子和所述第二佩戴因子获取在所述第一佩戴状态和所述第二佩戴状态共同影响下的视线差估计偏差;

11、视线方向获取模块,用于基于所述校准图像的视线方向、所述视线差值和所述视线差估计偏差,获得所述待估计图像的视线方向。

12、根据本公开的第三方面,提供了一种电子设备。该电子设备包括:存储器和处理器,所述存储器上存储有计算机程序,所述处理器执行所述程序时实现如以上所述的方法。

13、根据本公开的第四方面,提供了一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现本公开的上述方法。

14、本公开实施例提供的视线估计方法、装置、电子设备及存储介质,通过获取校准图像和待估计图像,及获取校准图像对应的第一佩戴因子和待估计图像对应的第二佩戴因子,获取校准图像与待估计图像之间估计的视线差值,并基于第一佩戴因子和第二佩戴因子获取在所述第一佩戴状态和所述第二佩戴状态共同影响下的视线差估计偏差,以获得待估计图像的视线方向。这样在校准图像的基础上,结合校准图像与待估计图像之间可能存在的因佩戴状态引起的视线差估计偏差,可以修正获得的校准图像与待估计图像之间估计的视线差值,提高待估计图像的视线方向的计算准确度,进而可以避免由于直接利用校准图像与待估计图像之间估计的视线差值而忽视因上述视线差估计偏差引起的待估计图像的视线方向计算不准确的问题。

本文档来自技高网...

【技术保护点】

1.一种视线估计方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述校准图像包括所述目标对象在第一佩戴状态下佩戴所述目标设备时获取的所述目标对象的眼部的第一校准图像和第二校准图像,所述第一校准图像和所述第二校准图像分别对应不同的预设视线方向;所述获取所述校准图像对应的第一佩戴因子,包括:

3.根据权利要求2所述的方法,其特征在于,所述确定所述第一佩戴因子,包括:

4.根据权利要求2所述的方法,其特征在于,获取待估计图像对应的第二佩戴因子,包括:

5.根据权利要求4所述的方法,其特征在于,所述确定所述第二佩戴因子,包括:

6.根据权利要求5所述的方法,其特征在于,所述方法还包括:

7.根据权利要求6所述的方法,其特征在于,所述方法还包括:

8.根据权利要求6所述的方法,其特征在于,所述方法还包括:

9.一种视线估计装置,其特征在于,所述装置包括:

10.一种电子设备,其特征在于,包括:

11.一种计算机可读存储介质,其特征在于,当所述计算机可读存储介质中的指令由电子设备的处理器执行时,使得所述电子设备能够执行如权利要求1-8中任一项所述的方法。

...

【技术特征摘要】

1.一种视线估计方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述校准图像包括所述目标对象在第一佩戴状态下佩戴所述目标设备时获取的所述目标对象的眼部的第一校准图像和第二校准图像,所述第一校准图像和所述第二校准图像分别对应不同的预设视线方向;所述获取所述校准图像对应的第一佩戴因子,包括:

3.根据权利要求2所述的方法,其特征在于,所述确定所述第一佩戴因子,包括:

4.根据权利要求2所述的方法,其特征在于,获取待估计图像对应的第二佩戴因子,包括:

5.根据权利要求4所述的方...

【专利技术属性】
技术研发人员:王亮亮
申请(专利权)人:北京字跳网络技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1