【技术实现步骤摘要】
本专利技术涉及视觉检测，更为具体地，涉及一种结合屏幕内容的视觉关注点检测方法和系统。
技术介绍
1、近年来，智能手机、平板等新型“微电脑”在人们生活中扮演着越来越重要的地位，各种智能大屏也出现在人们生活的各个角落。人们越来越多地从各种屏幕中获取信息，屏幕成为继纸张之后的又一重要载体。但是随着智能大屏的出现，人机交互已经不满足只存在于人与计算机之间，各种大屏，比如广告牌、展板等大型户外场景也需要人机交互的身影。
2、如何较为精确地分析用户的视觉关注点以得到更多重要的信息，是室外大屏场景交互所面临的严峻问题。因此，寻找一种有效、快速的用户视觉关注点检测的方法，并能通过分析屏幕内容对视觉关注点做出解释，成为解决上述问题的关键。
3、当前的交互模式中，基于视觉的交互方式大多用于计算机等小屏幕，且充分利用屏幕内容的很少，体感交互模式虽然跟屏幕内容有关联，但屏幕内容要做大量结构化处理，再与体感动作建立结构化关联，相对较为复杂。
4、在现有的视觉关注点检测算法中，使用体感相机对视觉关注点进行检测的算法结构简单，但是用户标定系统复杂。基于双目视觉系统的算法结构繁琐，难点在于特征点的匹配，计算量较大，相机标定过程和系统校准也比较复杂，影响精度和效率，且受到环境和距离的影响较大，在大屏交互环境中受限较多，不易于应用。而基于单目视觉环境的视觉关注点检测算法大多通过检测人眼位置得到视觉关注点。随着用户和屏幕点之间的距离加大，这种方法的准确率也明显降低。
5、此外，现有的视觉关注点检测算法主要通过在图像坐标
6、基于上述问题，亟需一种适用于室外大屏场景交互的且能够将对屏幕内容的分析引入视觉关注点检测中的视觉关注点检测方法。
技术实现思路
1、鉴于上述问题，本专利技术的目的是提供一种结合屏幕内容的视觉关注点检测方法及系统，以获得更精准的视觉关注点定位。
2、根据本专利技术的一个方面，提供了一种视觉关注点检测方法，包括：
3、通过创建深度摄像机坐标系、世界坐标系和屏幕图像坐标系，建立交互用户与屏幕的空间映射关系，以构建深度视觉环境；其中，所述深度摄像机坐标系为根据深度摄像机光轴方向构建的三维坐标系，所述深度摄像机用于采集用户图像，所述世界坐标系为以大屏幕表面中心为原点构建的三维坐标系，所述屏幕图像坐标系为根据屏幕内容图像位置构建的二维坐标系；
4、根据所述深度摄像机所采集的用户图像确定所述用户的面部方位和头部姿态，以初步确定所述用户的视觉关注点；
5、将所述视觉关注点和所述屏幕内容进行关联，以通过对所述屏幕内容的分析和与所述视觉关注点的比对，确定用户视觉关注的对象，并修正所述视觉关注点的定位。
6、根据本专利技术的另一方面，提供了一种的视觉关注点检测装置，包括：
7、深度视觉环境构建单元，用于通过创建深度摄像机坐标系、世界坐标系和屏幕图像坐标系，建立交互用户与屏幕的空间映射关系；其中，所述深度摄像机坐标系为根据深度摄像机光轴方向构建的三维坐标系，所述深度摄像机用于采集用户图像，所述世界坐标系为以大屏幕表面中心为原点构建的三维坐标系，所述屏幕图像坐标系为根据屏幕内容图像位置构建的二维坐标系；
8、视觉关注点确定单元，用于根据所述深度摄像机所采集的用户图像确定所述用户的面部方位和头部姿态，以初步确定所述用户的视觉关注点；
9、视觉关注点修正单元，用于将所述视觉关注点和屏幕内容进行关联，以通过对所述屏幕内容的分析和与所述视觉关注点的比对，确定用户视觉关注的对象，并修正所述视觉关注点的定位。
10、上述根据本专利技术的结合屏幕内容的视觉关注点检测方法及系统，通过构建改进的深度视觉环境，在适应不同的摄像机位置和用户位置的情况下建立交互用户与屏幕的空间映射关系，并在用户视觉关注点和屏幕内容之间建立联系，以通过对屏幕内容的分析和与所述视觉关注点的比对修正所述视觉关注点的定位，从而获得更精准的视觉关注点定位。
11、为了实现上述以及相关目的，本专利技术的一个或多个方面包括后面将详细说明并在权利要求中特别指出的特征。下面的说明以及附图详细说明了本专利技术的某些示例性方面。然而，这些方面指示的仅仅是可使用本专利技术的原理的各种方式中的一些方式。此外，本专利技术旨在包括所有这些方面以及它们的等同物。
本文档来自技高网...【技术保护点】
1.一种视觉关注点检测方法，其特征在于，包括：
2.根据权利要求1所述的视觉关注点检测方法，其特征在于，在构建所述深度视觉环境的过程中，
3.根据权利要求2所述的视觉关注点检测方法，其特征在于，所述深度摄像机用于采集用户的距离、面部方位和头部姿态图像。
4.根据权利要求2所述的视觉关注点检测方法，其特征在于，所述世界坐标系与所述深度摄像机坐标系的坐标映射关系为：
5.根据权利要求4所述的视觉关注点检测方法，其特征在于，
6.根据权利要求5所述的视觉关注点检测方法，其特征在于，在所述选取N个脸部特征点进行3D到2D的空间映射的过程中，
7.根据权利要求4所述的视觉关注点检测方法，其特征在于，所述对屏幕内容的分析包括：通过分析屏幕内容实例分割将屏幕图像分割为一个个实例，并确定所述实例在屏幕图像坐标系的边缘坐标；其中，
8.根据权利要求7所述的视觉关注点检测方法，其特征在于，
9.根据权利要求8所述的视觉关注点检测方法，其特征在于，在所述根据所述实例判别用户视觉关注的对象的过程中，
<...【技术特征摘要】
1.一种视觉关注点检测方法，其特征在于，包括：
2.根据权利要求1所述的视觉关注点检测方法，其特征在于，在构建所述深度视觉环境的过程中，
3.根据权利要求2所述的视觉关注点检测方法，其特征在于，所述深度摄像机用于采集用户的距离、面部方位和头部姿态图像。
4.根据权利要求2所述的视觉关注点检测方法，其特征在于，所述世界坐标系与所述深度摄像机坐标系的坐标映射关系为：
5.根据权利要求4所述的视觉关注点检测方法，其特征在于，
6.根据权利要求5所述的视觉关注点检测方...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。