本发明专利技术公开一种高速公路行人闯入检测方法和电子设备，该方法包括：首先采用多目标检测跟踪算法，确定多个连续视频帧中的目标检测框，然后将每个目标检测框对应的目标小图输入至目标多分类标签模型，输出每个目标对象的分类标签，针对表征非公路工作人员的分类标签对应的待检测目标对象，根据待检测目标对象的运动速度，位移距离，对象持续出现时长，判断高速公路上是否有行人闯入。由于先通过模型对高速公路上的目标对象进行分类，筛选出分类标签为非公路工作人员的目标对象，然后再根据筛选出的目标对象的运动速度、位移距离和对象持续出现时长，对高速公路上是否有行人闯入进行检测，从而提高检测的准确率。
【技术实现步骤摘要】
所属的技术人员能够理解，本公开的各个方面可以实现为系统、方法或程序产品。因此，本公开的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等)，或硬件和软件方面结合的实施方式，这里可以统称为“电路”、“模块”或“系统”。在一些可能的实施方式中，本公开中的电子设备可以中央处理器，也可以为图形处理器。根据本公开的电子设备可以至少包括至少一个处理器、以及至少一个计算机存储介质。其中，计算机存储介质存储有程序代码，当程序代码被处理器执行时，使得处理器执行本说明书上述描述的根据本公开各种示例性实施方式的高速公路行人闯入检测方法中的步骤。例如，处理器可以执行如图3中所示的步骤301-304。下面参照图13来描述根据本公开的这种实施方式的电子设备1200。图13显示的电子设备1200仅仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。如图13所示，电子设备1200以通用电子设备的形式表现。电子设备1200的组件可以包括但不限于：上述至少一个处理器1201、上述至少一个计算机存储介质1202、连接不同系统组件(包括计算机存储介质1202和处理器1201)的总线1203。总线1203表示几类总线结构中的一种或多种，包括计算机存储介质总线或者计算机存储介质控制器、外围总线、处理器或者使用多种总线结构中的任意总线结构的局域总线。计算机存储介质1202可以包括易失性计算机存储介质形式的可读介质，例如随机存取计算机存储介质(ram)1221和/或高速缓存存储介质1222，还可以进一步包括只读计算机存储介质(rom)1223。计算机存储介质1202还可以包括具有一组(至少一个)程序模块1224的程序/实用工具1225，这样的程序模块1224包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。电子设备1200也可以与一个或多个外部设备1204(例如键盘、指向设备等)通信，还可与一个或者多个使得用户能与电子设备1200交互的设备通信，和/或与使得该电子设备1200能与一个或多个其它电子设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(i/o)接口1205进行。并且，电子设备1200还可以通过网络适配器1206与一个或者多个网络(例如局域网(lan)，广域网(wan)和/或公共网络，例如因特网)通信。如图所示，网络适配器1206通过总线1203与用于电子设备1200的其它模块通信。应当理解，尽管图中未示出，可以结合电子设备1200使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理器、外部磁盘驱动阵列、raid系统、磁带驱动器以及数据备份存储系统等。在一种实施例中，本申请公开的电子设备，还可以包括通信单元(图13中未示出)，通信单元用于与摄像头通信，从摄像头获取由所述连续视频帧构成的视频流。处理器1201，用于采用多目标检测跟踪算法，确定多个连续视频帧中每个目标对象的目标检测框；将每个目标检测框对应的目标小图输入至目标多分类标签模型中，输出每个目标对象的分类标签；针对每个表征非公路工作人员的分类标签对应的待检测目标对象，根据所述待检测目标对象持续出现的连续视频帧中，相邻帧时长、所述待检测目标对象对应的每个目标检测框、所述待检测目标对象的尺寸，确定所述待检测目标对象的运动速度、位移距离和对象持续出现时长；根据每个待检测目标对象的运动速度，每个待检测目标对象的位移距离，每个待检测目标对象的对象持续出现时长，判断高速公路上是否有行人闯入。在一种实施例中，处理器1201具体用于：将每个目标检测框的中心点作为所述目标检测框中待检测目标对象的位置信息；在所述待检测目标对象持续出现的连续视频帧中，根据所述相邻帧时长、所述待检测目标对象在首个视频帧中的第一位置信息、所述待检测目标对象在末个视频帧中的第二位置信息、所述待检测目标对象的尺寸，确定所述待检测目标对象的运动速度、位移距离和对象持续出现时长，其中，所述首个视频帧为所述待检测目标对象持续出现的连续视频帧中的首个视频帧，所述末个视频帧为所述待检测目标对象持续出现的连续视频帧中的末个视频帧。在一种实施例中，处理器1201具体用于：根据所述待检测目标对象的第一位置信息和所述待检测目标对象的第二位置信息，确定所述待检测目标对象的帧位移距离；将所述帧位移距离和与所述待检测目标对象的尺寸对应的系数的乘积，作为所述待检测目标对象的位移距离，其中，所述待检测目标对象的尺寸和与其对应的系数负相关。在一种实施例中，处理器1201通过下列方式确定所述待检测目标对象的对象持续出现时长：根据所述待检测目标对象对应的第一视频帧和所述待检测目标对象对应的第二视频帧，确定所述待检测目标对象出现的连续帧数；将所述连续帧数与相邻帧时长的乘积，作为所述待检测目标对象的对象持续出现时长。在一种实施例中，处理器1201通过下列方式确定所述待检测目标对象的运动速度：根据所述待检测目标对象连续出现的视频帧，计算每组相邻视频帧中所述待检测目标对象的相邻运动速度；将计算得到的相邻运动速度的平均值，作为所述待检测目标对象的运动速度。在一种实施例中，处理器1201具体用于：针对任一组相邻视频帧，确定所述待检测目标对象在所述相邻视频帧的前一视频帧中的前一位置信息，以及所述待检测目标对象在所述相邻视频帧的后一视频帧中的后一位置信息；根据所述后一位置信息和所述前一位置信息，确定所述待检测目标对象的相邻位移距离；将所述相邻位移距离与相邻帧时长的比值，作为所述相邻视频帧中所述目标对象的相邻运动速度。在一种实施例中，处理器1201具体用于：根据所述后一位置信息和所述前一位置信息，确定相邻帧位移距离；将所述相邻帧位移距离和与所述待检测目标对象的尺寸对应的系数的乘积，作为所述待检测目标对象的相邻位移距离。在一种实施例中，处理器1201具体用于：针对任一待检测目标对象，若确定所述待检测目标对象的运动速度大于等于预设速度，所述待检测目标对象的位移距离大于等于预设距离，所述待检测目标对象的对象持续出现时长大于等于预设时长，则确定高速公路上有行人闯入；否则，确定高速公路上无行人闯入。在一种实施例中，处理器1201具体用于：若所述待检测目标对象的尺寸大于等于第一预设尺寸，则所述系数为第一系数；若所述待检测目标对象的尺寸小于所述第一预设尺寸，大于等于第二预设尺寸，则所述系数为第二系数；若所述待检测目标对象的尺寸小于所述第二预设尺寸，则所述系数为第三系数；其中，所述第一预设尺寸大于所述第二预设尺寸，所述第一系数、所述第二系数和所述第三系数均大于1。在一些可能的实施方式中，本公开提供的一种高速公路行人闯入检测方法的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当程序产品在计算机设备上运行时，程序代码用于使计算机设备执行本说明书上述描述的根据本公开各种示例性实施方式的高速公路行人闯入检测方法中的步骤。程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以是但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或本文档来自技高网...
【技术保护点】
1.一种高速公路行人闯入检测方法，其特征在于，该方法包括：
2.如权利要求1所述的方法，其特征在于，所述根据所述待检测目标对象持续出现的连续视频帧中，相邻帧时长、所述待检测目标对象对应的每个目标检测框、所述待检测目标对象的尺寸，确定所述待检测目标对象的运动速度、位移距离和对象持续出现时长，包括：
3.如权利要求2所述的方法，其特征在于，通过下列方式确定所述待检测目标对象的位移距离，包括：
4.如权利要求3所述的方法，其特征在于，通过下列方式确定所述待检测目标对象的对象持续出现时长：
5.如权利要求3所述的方法，其特征在于，通过下列方式确定所述待检测目标对象的运动速度：
6.如权利要求5所述的方法，其特征在于，所述根据所述待检测目标对象连续出现的视频帧，计算每组相邻视频帧中所述待检测目标对象的相邻运动速度，包括：
7.如权利要求6所述的方法，其特征在于，所述根据所述后一位置信息和所述前一位置信息，确定所述待检测目标对象的相邻位移距离，包括：
8.如权利要求1～7任一所述的方法，其特征在于，所述根据每个待检测目标对象的运动速度，每个待检测目标对象的位移距离，每个目标对象的对象持续出现时长，判断高速公路上是否有行人闯入，包括：
9.如权利要求3～7任一所述的方法，其特征在于，
10.一种电子设备，其特征在于，包括通信单元和处理器，其中：
...
【技术特征摘要】
1.一种高速公路行人闯入检测方法，其特征在于，该方法包括：
2.如权利要求1所述的方法，其特征在于，所述根据所述待检测目标对象持续出现的连续视频帧中，相邻帧时长、所述待检测目标对象对应的每个目标检测框、所述待检测目标对象的尺寸，确定所述待检测目标对象的运动速度、位移距离和对象持续出现时长，包括：
3.如权利要求2所述的方法，其特征在于，通过下列方式确定所述待检测目标对象的位移距离，包括：
4.如权利要求3所述的方法，其特征在于，通过下列方式确定所述待检测目标对象的对象持续出现时长：
5.如权利要求3所述的方法，其特征在于，通过下列方式确定所述待检测目标对象的运动速度：
【专利技术属性】
技术研发人员：王雯雯，张四海，臧海洋，
申请(专利权)人：青岛海信网络科技股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。