System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本专利技术涉及车辆预警领域,并且更具体地涉及一种用于监控车内人员过激行为的方法以及装置。
技术介绍
1、在行驶的车辆中,车内人员(例如,驾驶员和/或若干乘员)任意两者之间可能会出现争吵甚至打闹等过激行为,这些过激行为有可能影响驾驶员的驾驶状态以及车辆的行车状态,进而出现安全问题。
2、现有的一些解决方法包括当基于图像识别车内乘员为情侣时,主动实现游戏推荐、劝和服务以及拍照指导等。还有一些现有方案包括仅基于对车辆内的声音信息进行采集以判断车内人员是否存在异常行为。
3、但是,这些方法无法提供准确的、适合更多类型的车内人员过激行为的判断预警,也不能提供更适合的交互指令以改善车辆的安全状态。
4、因此,需要一种改进的监控车内人员过激行为的方案。
技术实现思路
1、为解决上述技术问题至少之一,本专利技术提供了一种用于监控车内人员过激行为的方法以及装置。
2、根据本专利技术的第一方面,提供一种用于监控车内人员过激行为的方法,所述方法包括:
3、采集车内声音数据,以获取与所述声音数据相关联的音频信号数据;
4、对所获取的音频信号数据进行处理,以识别出其中的人员相关音频信号;
5、在所识别的所述人员相关音频信号达到相应阈值时,对车内人员进行图像采集;
6、对所采集的车内人员的图像进行处理,以识别车内人员的情绪状态;以及
7、根据所述人员相关音频信号的音频识别结果和所述车内人员的情绪状态识别
8、在一个实施方案中,所述方法进一步包括:当判断所述车内人员存在过激行为时,获取车辆内部存在过激行为的人员在车辆内的位置和当前车辆状态信息;根据所获取的存在过激行为的人员在车辆内的位置以及当前车辆状态信息生成交互指令,向存在过激行为的车内人员和/或当前车辆发送相应的提醒和/或控制信息。
9、在一个实施方案中,所述对所获取的音频信号数据进行处理,以识别出其中的人员相关音频信号包括:将固定时间长度的音频信号数据分割为指定采集频率的至少一个音频信号片段数据;将所述至少一个音频信号片段数据中的每个通过卷积神经网络模型进行音频分类,确定所述至少一个音频信号片段数据中的每个的音频分类结果是否为人的说话音频。
10、在一个实施方案中,所述对所获取的音频信号数据进行处理,以识别出其中的人员相关音频信号进一步包括:根据所获取的音频信号的所有音频信号片段数据的音频分类结果确定人声的比率;当所述人声的比率超过相应的预设阈值时,确定所获取的音频信号数据中的人员相关音频信号的音频强度值;以及使用音频烈度判别模型,根据所确定的人员相关音频信号的音频强度值计算所述人员相关音频信号的人声烈度等级。
11、在一个实施方案中,所述在所识别的所述人员相关音频信号达到相应阈值时,对车内人员进行图像采集包括:当所述人声烈度等级大于声音烈度阈值时,判断车内人员可能存在过激行为,响应于此对车内人员进行图像采集,其中所采集的图像信息数据至少包括所述车内人员的面部表情、肢体动作以及在车辆内的位置。
12、在一个实施方案中,所述当前车辆状态信息包括当前车辆的速度、行驶方向或行车位置,其中所述根据所获取的存在过激行为的人员在车辆内的位置以及当前车辆状态信息生成交互指令,向存在过激行为的车内人员和/或当前车辆发送相应的提醒和/或控制信息进一步包括:向存在过激行为的人员发出预警音提醒信息和/或控制当前车辆行驶状态的信息。
13、在一个实施方案中,所述向存在过激行为的人员发出预警音提醒信息和/或控制当前车辆行驶状态的信息包括:
14、当根据存在过激行为的人员在车辆内的位置判断存在过激行为的人员之一是驾驶员时,在当前车辆的速度大于第一速度时,向存在过激行为的驾驶员和乘员发出预警音提醒信息,并且向当前车辆发送控制信息以使其进入缓慢降速模式;
15、当根据存在过激行为的人员在车辆内的位置判断存在过激行为的人员之一是驾驶员时,在当前车辆的速度低于所述第一速度时,向存在过激行为的驾驶员和乘员发出预警音提醒信息;
16、当根据存在过激行为的人员在车辆内的位置判断存在过激行为的人员均是乘员时,在当前车辆的速度大于第二速度时,所述第二速度高于第一速度,向驾驶员和存在过激行为的乘员发出预警音提醒信息;以及
17、当根据存在过激行为的人员在车辆内的位置判断存在过激行为的人员均是乘员时,在当前车辆的速度低于所述第二速度时,向存在过激行为的乘员发出预警音提醒信息。
18、根据本专利技术的第二方面,提供一种用于监控车内人员过激行为的装置,所述装置包括:
19、音频采集模块,所述音频采集模块被配置为采集车内声音数据,以获取与所述声音数据相关联的音频信号数据;
20、音频识别模块,所述音频识别模块被配置为对所获取的音频信号数据进行处理,以识别出其中的人员相关音频信号;
21、图像采集模块,所述图像采集模块被配置为在所识别的所述人员相关音频信号达到相应阈值时,对车内人员进行图像采集;
22、图像识别模块,所述图像识别模块被配置为对所采集的车内人员的图像进行处理,以识别车内人员的情绪状态;以及
23、过激行为判断模块,所述过激行为判断模块被配置为根据所述人员相关音频信号的音频识别结果和所述车内人员的情绪状态识别结果,判断车内人员是否存在过激行为。
24、在一个实施方案中,所述装置进一步包括指令交互模块,所述指令交互模块被配置为:当判断所述车内人员存在过激行为时,获取车辆内部存在过激行为的人员在车辆内的位置和当前车辆状态信息;以及根据所获取的存在过激行为的人员在车辆内的位置以及当前车辆状态信息生成交互指令,向存在过激行为的车内人员和/或当前车辆发送相应的提醒和/或控制信息。
25、在一个实施方案中,所述音频识别模块进一步被配置为:将固定时间长度的音频信号数据分割为指定采集频率的至少一个音频信号片段数据;将所述至少一个音频信号片段数据中的每个通过卷积神经网络模型进行音频分类,确定所述至少一个音频信号片段数据中的每个的音频分类结果是否为人的说话音频。
26、在一个实施方案中,所述音频识别模块进一步被配置为:根据所获取的音频信号的所有音频信号片段数据的音频分类结果确定人声的比率;当所述人声的比率超过相应的预设阈值时,确定所获取的音频信号数据中的人员相关音频信号的音频强度值;以及使用音频烈度判别模型,根据所确定的人员相关音频信号的音频强度值计算所述人员相关音频信号的人声烈度等级。
27、在一个实施方案中,所述图像采集模块进一步被配置为:当所述人声烈度等级大于声音烈度阈值时,判断车内人员可能存在过激行为,响应于此对车内人员进行图像采集,其中所采集的图像信息数据至少包括所述车内人员的面部表情、肢体动作以及在车辆内的位置。
28、在一个实施方案中,所述当前车辆状态信息包括本文档来自技高网...
【技术保护点】
1.一种用于监控车内人员过激行为的方法,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述方法进一步包括:
3.根据权利要求1或2所述的方法,其特征在于,所述对所获取的音频信号数据进行处理,以识别出其中的人员相关音频信号包括:
4.根据权利要求3所述的方法,其特征在于,所述对所获取的音频信号数据进行处理,以识别出其中的人员相关音频信号进一步包括:
5.根据权利要求4所述的方法,其特征在于,所述在所识别的所述人员相关音频信号达到相应阈值时,对车内人员进行图像采集包括:
6.根据权利要求2所述的方法,其特征在于,所述当前车辆状态信息包括当前车辆的速度、行驶方向或行车位置,其中所述根据所获取的存在过激行为的人员在车辆内的位置以及当前车辆状态信息生成交互指令,向存在过激行为的车内人员和/或当前车辆发送相应的提醒和/或控制信息进一步包括:向存在过激行为的人员发出预警音提醒信息和/或控制当前车辆行驶状态的信息。
7.根据权利要求6所述的方法,其特征在于,所述向存在过激行为的人员发出预警音提醒信息和
8.一种用于监控车内人员过激行为的装置,其特征在于,所述装置包括:
9.根据权利要求8所述的装置,其特征在于,所述装置进一步包括指令交互模块,所述指令交互模块被配置为:
10.根据权利要求8或9所述的装置,其特征在于,所述音频识别模块进一步被配置为:
11.根据权利要求10所述的装置,其特征在于,所述音频识别模块进一步被配置为:
12.根据权利要求11所述的装置,其特征在于,所述图像采集模块进一步被配置为:
13.根据权利要求9所述的装置,其特征在于,所述当前车辆状态信息包括当前车辆的速度、行驶方向或行车位置,其中所述指令交互模块进一步被配置为:向存在过激行为的人员发出预警音提醒信息和/或控制当前车辆行驶状态的信息。
14.根据权利要求13所述的装置,其特征在于,所述向存在过激行为的人员发出预警音提醒信息和/或控制当前车辆行驶状态的信息包括:
15.一种计算机设备,包括存储器和处理器,所述存储器上存储有计算机指令,其特征在于,所述计算机指令在由所述处理器执行时导致根据权利要求1至7中任一项所述的用于监控车内人员过激行为的方法被执行。
16.一种非暂时性计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序在由处理器执行时导致根据权利要求1至7中任一项所述的用于监控车内人员过激行为的方法被执行。
...【技术特征摘要】
1.一种用于监控车内人员过激行为的方法,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述方法进一步包括:
3.根据权利要求1或2所述的方法,其特征在于,所述对所获取的音频信号数据进行处理,以识别出其中的人员相关音频信号包括:
4.根据权利要求3所述的方法,其特征在于,所述对所获取的音频信号数据进行处理,以识别出其中的人员相关音频信号进一步包括:
5.根据权利要求4所述的方法,其特征在于,所述在所识别的所述人员相关音频信号达到相应阈值时,对车内人员进行图像采集包括:
6.根据权利要求2所述的方法,其特征在于,所述当前车辆状态信息包括当前车辆的速度、行驶方向或行车位置,其中所述根据所获取的存在过激行为的人员在车辆内的位置以及当前车辆状态信息生成交互指令,向存在过激行为的车内人员和/或当前车辆发送相应的提醒和/或控制信息进一步包括:向存在过激行为的人员发出预警音提醒信息和/或控制当前车辆行驶状态的信息。
7.根据权利要求6所述的方法,其特征在于,所述向存在过激行为的人员发出预警音提醒信息和/或控制当前车辆行驶状态的信息包括:
8.一种用于监控车内人员过激行为的装置,其特征在于,所述装置包括:
9.根据...
【专利技术属性】
技术研发人员:刘辰龙,王晔,蒋忠波,
申请(专利权)人:大众酷翼北京科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。