System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 显示屏的显示控制方法、显示控制设备和显示系统技术方案_技高网

显示屏的显示控制方法、显示控制设备和显示系统技术方案

技术编号:42465069 阅读:21 留言:0更新日期:2024-08-21 12:52
本申请适用于显示技术领域,提供了一种显示屏的显示控制方法、显示控制设备和显示系统。其中,所述显示屏的显示控制方法应用于显示控制设备,所述显示控制设备用于与显示屏连接,所述方法包括:获取用户对象的场景图像流,所述场景图像流包括对所述用户对象连续采集的多张场景图像;根据所述场景图像流,识别所述用户对象的手部特征信息;根据所述手部特征信息,确定对所述显示屏的控制指令,根据所述控制指令控制所述显示屏。本申请的实施例可以更加准确、精细进行屏幕交互控制。

【技术实现步骤摘要】

本申请属于显示,尤其涉及一种显示屏的显示控制方法、显示控制设备和显示系统


技术介绍

1、随着显示技术的发展,安防监控、交通监控、教育、医疗等不同的领域都会应用显示屏。用户在实际使用显示屏的过程中,往往需要对显示屏进行控制。相关技术的控制方式通常是通过语音交互、触屏控制、遥控等方式实现的。触屏控制、遥控的方式需要用户能够接触屏幕或遥控器。而语音交互的方式在嘈杂环境中准确性较低。因此,相关技术的使用场景具有一定的限制,难以准确、精细地实现屏幕交互控制。


技术实现思路

1、本申请实施例提供一种显示屏的显示控制方法、显示控制设备和存储介质,可以通过用户的手势实现更加准确、精细的屏幕交互控制。

2、本申请实施例第一方面提供一种显示屏的显示控制方法,应用于显示控制设备,所述显示控制设备用于与显示屏连接,所述方法包括:获取用户对象的场景图像流,所述场景图像流包括对所述用户对象连续采集的多张场景图像;根据所述场景图像流,识别所述用户对象的手部特征信息;根据所述手部特征信息,确定对所述显示屏的控制指令,根据所述控制指令控制所述显示屏。

3、在第一方面的一些实施方式中,所述方法还包括:确定当前的运行模式;所述根据所述手部特征信息,确定对所述显示屏的控制指令,包括:根据所述当前的运行模式和所述手部特征信息,确定所述控制指令。

4、在第一方面的一些实施方式中,所述根据所述当前的运行模式和所述手部特征信息,确定所述控制指令,包括:若所述当前的运行模式为虚拟桌面模式,则构建与所述显示屏对应的虚拟桌面;根据所述手部特征信息,确定与所述手部特征信息关联的鼠标控制指令;根据所述手部特征信息,确定手指在所述虚拟桌面中的触点位置;根据所述触点位置和所述鼠标控制指令,生成所述控制指令,所述控制指令用于对所述显示屏内与所述触点位置对应的位置进行所述鼠标控制指令对应的控制操作。

5、在第一方面的一些实施方式中,所述构建虚拟桌面,包括:根据所述场景图像流,识别所述用户对象的人体关键点的位置信息,所述人体关键点包括人体的两个肩关节点和两个髋关节点;根据所述两个肩关节点的位置信息和所述两个髋关节点的位置信息,计算所述两个肩关节点及所述两个髋关节点所围成区域的区域中心位置、所述两个肩关节点之间的坐标距离和所述两个髋关节点的坐标距离;根据所述区域中心位置确定虚拟桌面的中心点位置;根据所述两个肩关节点之间的坐标距离和所述两个髋关节点的坐标距离,分别确定所述虚拟桌面的长度和宽度,得到所述虚拟桌面的边框尺寸;根据所述中心点位置及所述边框尺寸,构建所述虚拟桌面。

6、在第一方面的一些实施方式中,所述手部特征信息包括手部关键点的位置信息,所述人体关键点还包括人体中心点,所述根据所述手部特征信息,确定手指在所述虚拟桌面中的触点位置,包括:根据所述手部关键点的位置信息与所述人体中心点的位置信息,确定所述手部关键点和所述人体中心点之间的相对位置关系,得到所述用户对象的手部与人体的相对位置关系;根据所述相对位置关系,确定所述触点位置。

7、在第一方面的一些实施方式中,所述根据所述当前的运行模式和所述手部特征信息,确定所述控制指令,包括:若所述当前的运行模式为凌空书写模式,则根据所述手部特征信息,确定所述用户对象手部的书写轨迹;对所述书写轨迹进行识别,得到字符识别结果;根据所述字符识别结果,生成所述控制指令。

8、在第一方面的一些实施方式中,所述根据所述控制指令控制所述显示屏,包括:若所述控制指令为字符语义控制指令,则根据所述字符识别结果对应的控制指令,对所述显示屏进行控制;若所述控制指令为字符输入控制指令,则在所述显示屏显示的目标输入框内输入所述字符识别结果,并在所述显示屏中对所述目标输入框进行显示更新。

9、在第一方面的一些实施方式中,所述根据所述当前的运行模式和所述手部特征信息,确定所述显示屏的控制指令,包括:若所述当前的运行模式为手势识别模式,则根据所述手部特征信息,确定所述用户对象的手势动作;将与所述手势动作关联的指令作为所述控制指令。

10、在第一方面的一些实施方式中,所述确定当前的运行模式,包括:根据所述手部特征信息,确定所述用户对象的手势动作;若所述用户对象的手势动作与目标模式的进入动作相匹配,则将所述目标模式作为所述当前的运行模式,其中,所述目标模式为多种预设运行模式中除手势识别模式以外的任意一种预设运行模式,所述预设运行模式至少包括虚拟桌面模式和凌空书写模式;若不存在与所述用户对象的手势动作相匹配的进入动作,则将所述手势识别模式作为所述当前的运行模式。

11、本申请实施例第二方面提供的一种显示屏的显示控制设备,所述显示控制设备用于与显示屏连接,所述设备包括:获取单元,用于获取用户对象的场景图像流,所述场景图像流包括对所述用户对象连续采集的多张场景图像;识别单元,用于根据所述场景图像流,识别所述用户对象的手部特征信息;控制单元,用于根据所述手部特征信息,确定对所述显示屏的控制指令,根据所述控制指令控制所述显示屏。

12、本申请实施例第三方面提供一种显示控制设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述显示屏的显示控制方法的步骤。

13、本申请实施例第四方面提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述显示屏的显示控制方法的步骤。

14、本申请实施例第五方面提供了一种计算机程序产品,当计算机程序产品在显示控制设备上运行时,使得显示控制设备执行上述显示屏的显示控制方法的步骤。

15、本申请实施例第六方面提供了一种显示系统,包括:采集设备、与所述采集设备连接的显示控制设备、与所述显示控制设备连接的显示屏;所述采集设备用于采集并向所述显示控制设备发送场景图像流,所述显示控制设备用于根据第一方面任意一项所述显示屏的显示控制方法,对所述显示屏进行控制。

16、在第六方面的一些实施方式中,所述显示控制设备为解码设备,所述解码设备通过交换机和编码设备连接,所述编码设备还与视频源设备连接。

17、在第六方面的一些实施方式中,所述显示控制设备为媒体服务器,所述媒体服务器通过视频处理设备与所述显示屏连接,所述媒体服务器还与视频源设备连接。

18、在本申请的实施方式中,获取用户对象的场景图像流,并根据场景图像流中的多张场景图像,识别用户对象的手部特征信息,然后根据手部特征信息,确定显示屏的控制指令,以根据控制指令控制显示屏,能够参考用户对象的手部手势动作并进行对应的显示屏控制操作,无需接触显示屏或采用遥控器,在嘈杂环境也能够获知用户意图,从而实现更加准确、精细的屏幕交互控制。

本文档来自技高网...

【技术保护点】

1.一种显示屏的显示控制方法,其特征在于,应用于显示控制设备,所述显示控制设备用于与显示屏连接,所述方法包括:

2.如权利要求1所述的显示屏的显示控制方法,其特征在于,所述方法还包括:

3.如权利要求2所述的显示屏的显示控制方法,其特征在于,所述根据所述当前的运行模式和所述手部特征信息,确定所述控制指令,包括:

4.如权利要求3所述的显示屏的显示控制方法,其特征在于,所述构建与所述显示屏对应的虚拟桌面,包括:

5.如权利要求4所述的显示屏的显示控制方法,其特征在于,所述手部特征信息包括手部关键点的位置信息,所述人体关键点还包括人体中心点,所述根据所述手部特征信息,确定手指在所述虚拟桌面中的触点位置,包括:

6.如权利要求2所述的显示屏的显示控制方法,其特征在于,所述根据所述当前的运行模式和所述手部特征信息,确定所述控制指令,包括:

7.如权利要求6所述的显示屏的显示控制方法,其特征在于,所述根据所述控制指令控制所述显示屏,包括:

8.如权利要求2所述的显示屏的显示控制方法,其特征在于,所述根据所述当前的运行模式和所述手部特征信息,确定所述控制指令,包括:

9.如权利要求2所述的显示屏的显示控制方法,其特征在于,所述确定当前的运行模式,包括:

10.一种显示屏的显示控制设备,其特征在于,所述显示控制设备用于与显示屏连接,所述设备包括:

11.一种显示控制设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至9任一项所述显示屏的显示控制方法的步骤。

12.一种显示系统,其特征在于,包括:采集设备、与所述采集设备连接的显示控制设备、与所述显示控制设备连接的显示屏;所述采集设备用于采集并向所述显示控制设备发送场景图像流,所述显示控制设备用于根据权利要求1至9任一项所述显示屏的显示控制方法,对所述显示屏进行控制。

13.如权利要求12所述的显示系统,其特征在于,所述显示控制设备为解码设备,所述解码设备通过交换机和编码设备连接,所述编码设备还与视频源设备连接。

14.如权利要求12所述的显示系统,其特征在于,所述显示控制设备为媒体服务器,所述媒体服务器通过视频处理设备与所述显示屏连接,所述媒体服务器还与视频源设备连接。

...

【技术特征摘要】

1.一种显示屏的显示控制方法,其特征在于,应用于显示控制设备,所述显示控制设备用于与显示屏连接,所述方法包括:

2.如权利要求1所述的显示屏的显示控制方法,其特征在于,所述方法还包括:

3.如权利要求2所述的显示屏的显示控制方法,其特征在于,所述根据所述当前的运行模式和所述手部特征信息,确定所述控制指令,包括:

4.如权利要求3所述的显示屏的显示控制方法,其特征在于,所述构建与所述显示屏对应的虚拟桌面,包括:

5.如权利要求4所述的显示屏的显示控制方法,其特征在于,所述手部特征信息包括手部关键点的位置信息,所述人体关键点还包括人体中心点,所述根据所述手部特征信息,确定手指在所述虚拟桌面中的触点位置,包括:

6.如权利要求2所述的显示屏的显示控制方法,其特征在于,所述根据所述当前的运行模式和所述手部特征信息,确定所述控制指令,包括:

7.如权利要求6所述的显示屏的显示控制方法,其特征在于,所述根据所述控制指令控制所述显示屏,包括:

8.如权利要求2所述的显示屏的显示控制方法,其特征在于,所述根据所述当前的运行模式和所述手部特征信息,确定所述控制指...

【专利技术属性】
技术研发人员:马腾飞张聪慧陈俊源韩太初林先萌杨城葛敏锋
申请(专利权)人:北京嗨动视觉科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1