一种基于图像与声纹的主动预警方法、系统和设备技术方案

本申请涉及一种基于图像与声纹的主动预警方法、系统及设备，其中，该主动预警方法包括识别图像信息以及声纹信息；在图像信息包括预设危险行为和/或声纹信息包括预设声纹特征的情况下，发送预警呼叫指令；基于预警呼叫指令，形成预警呼叫信息，其中，预警呼叫信息包括危险事件信息、危险事件信息发生时间、危险事件信息发生地点、危险人员信息、危险人员实时位置。通过本申请，解决了人员逃避监控拍摄、时效延后性高、出现监控遗漏的问题，实现了图像与声纹双重自动识别、基于预警呼叫信息自动呼叫的技术效果。

【技术实现步骤摘要】
一种基于图像与声纹的主动预警方法、系统和设备
本申请涉及监控预警
，特别是涉及一种基于图像与声纹的主动预警方法、系统和设备。
技术介绍
为了提高对公共区域或人流密集区域发生违法犯罪事件的响应度，通常会在公共区域、人流密集区域设置多路图像监控设备，以获取公共区域、人流密集区域的实时图像信息，并通过监控中心的监控大屏进行实时监控，以便在出现违法犯罪事件的情况下，及时向位于出现违法犯罪事件地点附近的安保人员发送通知，以便安保人员赶往相关地点，从而解决相关问题。然而，上述监控方法具有一定的缺陷：1)图像监控设备具有一定的盲区，违法犯罪人员或危险人员信息会通过戴帽子、戴口罩的方式遮挡面部，以避免图像监控设备获取其图像信息；2)具有一定的时效延后性，从图像监控设备传输的实时图像信息判断违法犯罪行为，到通知调度相关地点附近的安保人员，当安保人员抵达相关地点时，违法犯罪事件已经发生甚至已经完成，导致无辜人员受到侵害；3)图像监控设备数量繁多，监控人员无法同一时刻观察到每一个图像监控设备传输的实时图像信息，导致出现遗漏、忽略等问题。因此，针对相关技术中人员逃避监控拍摄、时效延后性高、出现监控遗漏等问题，尚未提出有效的解决方案。
技术实现思路
本申请实施例提供了一种基于图像与声纹的主动预警方法、系统和设备，以至少解决相关技术中人员逃避监控拍摄、时效延后性高、出现监控遗漏等问题。第一方面，本申请实施例提供了一种基于图像与声纹的主动预警方法，包括：识别图像信息以及声纹信息；在所述图像信息包括预设危险行为和/或所述声纹信息包括预设声纹特征的情况下，发送预警呼叫指令；基于所述预警呼叫指令，形成预警呼叫信息，其中，所述预警呼叫信息包括危险事件信息、危险事件信息发生时间、危险事件信息发生地点、危险人员信息、危险人员实时位置。在其中的一些实施例中，在形成预警呼叫信息之后，所述方法还包括：将所述预警呼叫信息发送至预设范围内的至少一个呼叫终端，其中，所述预设范围指以所述危险事件信息发生地点和/或所述危险人员实时位置为中心、以预设距离为半径的范围；获取至少一个所述呼叫终端的与所述预警呼叫信息相对应的出警信息，其中，所述出警信息包括出警人员、出警人员实时位置；基于所述危险事件信息发生地点和/或所述危险人员实时位置、所述出警人员实时位置，生成动态路径信息。在其中的一些实施例中，基于所述危险事件信息发生地点和所述出警人员实时位置，生成第一动态路径信息。在其中的一些实施例中，基于所述危险人员实时位置和所述出警人员实时位置，生成第二动态路径信息。在其中的一些实施例中，识别图像信息包括：将图像信息输入至行为模型，以生成行为信息，其中，所述行为信息包括人员信息、动作信息；在所述行为信息为预设危险行为和/或所述人员信息为预设危险人员信息的情况下，持续获取预设时间段的包括所述人员信息的若干图像信息，以生成图像流信息。在其中的一些实施例中，识别声纹信息包括：提取声纹信息的声纹特征；将所述声纹特征输入至声纹库；在所述声纹特征与所述声纹库中的一预设声纹特征匹配的情况下，将所述声纹信息与所述预设声纹特征对应的属性信息关联，其中，所述属性信息包括危险人员信息、危险行为信息。在其中的一些实施例中，在所述声纹特征与所述声纹库中的一预设声纹特征匹配的情况下，基于所述声纹特征，更新所述声纹库。在其中的一些实施例中，所述声纹特征至少为以下之一：能量特征、谐波噪声比特征、梅尔倒谱系数特征。第二方面，本申请实施例提供了一种基于图像与声纹的主动预警系统，包括：若干图像采集设备，用于获取不同位置的图像信息；若干声纹采集设备，用于获取不同位置的声纹信息；图像识别单元，与若干所述图像采集设备连接，用于识别若干所述图像设备传输的所述图像信息，以生成图像识别信息，其中，所述图像识别信息用于指示所述图像信息是否包括预设危险行为；声纹识别单元，与若干声纹采集设备连接，用于识别若干所述声纹采集设备传输的所述声纹信息，以生成声纹识别信息，其中，所述声纹识别信息用于指示所述声纹信息是否包括预设声纹特征；指令单元，与所述图像识别单元、声纹识别单元连接，用于在所述图像信息包括所述预设危险行为和/或所述声纹信息包括预设声纹特征的情况下，生成预警呼叫指令呼叫服务器，与所述指令单元连接，用于基于所述预警呼叫指令形成预警呼叫信息，其中，所述预警呼叫信息包括危险事件信息、危险事件信息发生时间、危险事件信息发生地点、危险人员信息、危险人员实时位置；若干呼叫终端，与所述呼叫服务器连接，用于接收所述呼叫服务器传输的所述预警呼叫信息。在其中的一些实施例中，还包括：位置计算单元，与所述呼叫服务器连接，用于以所述危险事件信息发生地点和/或所述危险人员实时位置为中心、以预设距离为半径生成预设范围；所述呼叫服务器用于将所述预警呼叫信息发送至所述预设范围内的至少一个所述呼叫终端。在其中的一些实施例中，还包括：监控单元，所述监控单元分别与若干所述图像采集设备、若干所述声纹采集设备、所述图像识别单元、所述声纹识别单元、所述指令单元、所述呼叫服务器、若干所述呼叫终端连接，用于监控若干所述图像采集设备传输的所述图像信息以及若干所述声纹采集设备传输的所述声纹信息，以及用于获取所述图像识别单元传输的所述图像识别信息、获取所述声纹识别单元传输的所述声纹识别信息、获取所述指令单元传输的所述预警呼叫指令、获取所述呼叫服务器传输的所述预警呼叫信息，以及用于向若干所述呼叫终端传输所述预警呼叫信息。第三方面，本申请实施例提供了一种计算机设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器执行第一方面所述的基于图像与声纹的主动预警方法。第四方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，该计算机程序被处理器执行时实现如第一方面所述的基于图像与声纹的主动预警方法。相比于相关技术，本申请实施例提供的一种基于图像与声纹的主动预警方法、系统及设备，通过识别图像信息以及声纹信息；在图像信息包括预设危险行为和/或声纹信息包括预设声纹特征的情况下，发送预警呼叫指令；基于预警呼叫指令，形成预警呼叫信息，其中，预警呼叫信息包括危险事件信息、危险事件信息发生时间、危险事件信息发生地点、危险人员信息、危险人员实时位置，解决了人员逃避监控拍摄、时效延后性高、出现监控遗漏的问题，实现了图像与声纹双重自动识别、基于预警呼叫信息自动呼叫的技术效果。附图说明此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成本文档来自技高网...

【技术保护点】
1.一种基于图像与声纹的主动预警方法，其特征在于，包括：/n识别图像信息以及声纹信息；/n在所述图像信息包括预设危险行为和/或所述声纹信息包括预设声纹特征的情况下，发送预警呼叫指令；/n基于所述预警呼叫指令，形成预警呼叫信息，其中，所述预警呼叫信息包括危险事件信息、危险事件信息发生时间、危险事件信息发生地点、危险人员信息、危险人员实时位置。/n

【技术特征摘要】
1.一种基于图像与声纹的主动预警方法，其特征在于，包括：
识别图像信息以及声纹信息；
在所述图像信息包括预设危险行为和/或所述声纹信息包括预设声纹特征的情况下，发送预警呼叫指令；
基于所述预警呼叫指令，形成预警呼叫信息，其中，所述预警呼叫信息包括危险事件信息、危险事件信息发生时间、危险事件信息发生地点、危险人员信息、危险人员实时位置。


2.根据权利要求1所述的基于图像与声纹的主动预警方法，其特征在于，在形成预警呼叫信息之后，所述方法还包括：
将所述预警呼叫信息发送至预设范围内的至少一个呼叫终端，其中，所述预设范围指以所述危险事件信息发生地点和/或所述危险人员实时位置为中心、以预设距离为半径的范围；
获取至少一个所述呼叫终端的与所述预警呼叫信息相对应的出警信息，其中，所述出警信息包括出警人员、出警人员实时位置；
基于所述危险事件信息发生地点和/或所述危险人员实时位置、所述出警人员实时位置，生成动态路径信息。


3.根据权利要求1所述的基于图像与声纹的主动预警方法，其特征在于，识别图像信息包括：
将图像信息输入至行为模型，以生成行为信息，其中，所述行为信息包括人员信息、动作信息；
在所述行为信息为预设危险行为和/或所述人员信息为预设危险人员信息的情况下，持续获取预设时间段的包括所述人员信息的若干图像信息，以生成图像流信息。


4.根据权利要求1所述的基于图像与声纹的主动预警方法，其特征在于，识别声纹信息包括：
提取声纹信息的声纹特征；
将所述声纹特征输入至声纹库；
在所述声纹特征与所述声纹库中的一预设声纹特征匹配的情况下，将所述声纹信息与所述预设声纹特征对应的属性信息关联，其中，所述属性信息包括危险人员信息、危险行为信息。


5.根据权利要求4所述的基于图像与声纹的主动预警方法，其特征在于，所述声纹特征至少为以下之一：能量特征、谐波噪声比特征、梅尔倒谱系数特征。


6.一种基于图像与声纹的主动预警系统，其特征在于，包括：
若干图像采集设备，用于获取不同位置的图像信息；
若干声纹采集设备，用于获取不同位置的声纹信息；
图像识别单元，与若干所述图像采集设备连接，用于识别若干所述图像设备传输的所述图像信息，以生成图像识别信息，其中，所述图像识别信息用于指示所述图像信...

【专利技术属性】
技术研发人员：李旭滨，
申请(专利权)人：上海茂声智能科技有限公司，
类型：发明
国别省市：上海;31