一种目标关联方法及装置制造方法及图纸

本发明专利技术实施例公开一种目标关联方法及装置，该方法包括：获得当前待标注框，及当前待标注框对应的第一视频帧；获得与当前待标注框存在疑似关联关系的推荐框以及每一推荐框对应的第二视频帧；展示包含当前待标注框的第一视频帧以及每一推荐框对应的包含该推荐框的第二视频帧；基于用户的第一关联关系操作信息，从所有推荐框中确定是否存在与当前待标注框存在关联关系的目标推荐框，并在确定存在与当前待标注框存在关联关系的目标推荐框的情况下，建立当前待标注框与目标推荐框之间的关联关系，以实现对视频的每一帧视频帧中的相同目标的便捷有效的关联。标的便捷有效的关联。标的便捷有效的关联。

【技术实现步骤摘要】
一种目标关联方法及装置


[0001]本专利技术涉及目标跟踪
，具体而言，涉及一种目标关联方法及装置。

技术介绍

[0002]目前，基于目标检测的跟踪算法，可自动检测出待检测视频中每帧视频帧所包含的目标对象，并将前一帧视频帧中所包含的与该目标对象为同一目标对象的对象进行关联。
[0003]然而，在基于目标检测的跟踪算法，对待检测视频中各目标对象进行跟踪检测的过程中，往往出现漏检或误检的情况，例如：针对待检测视频出现消失再出现的目标对象，基于目标检测的跟踪算法，出现将出现消失再出现的目标对象检测为不同对象，即将目标对象消失前和再出现后识别为不同的情况；或出现将连续出现的同一目标对象识别为不同目标对象的情况。
[0004]针对上述情况，需要人工对基于目标检测的跟踪算法所得到检测结果，进行检查及标定判断。那么，如何提供一种便捷有效的对待检测视频检测结果中出现漏检或误检的情况进行检查及标定判断，并进行修正成为亟待解决的问题。

技术实现思路

[0005]本专利技术提供了一种目标关联方法及装置，以实现对视频的每一帧视频帧中出现的相同目标的便捷有效的关联。具体的技术方案如下：
[0006]第一方面，本专利技术实施例提供了一种目标关联方法，所述方法包括：
[0007]获得当前待标注框，及所述当前待标注框对应的第一视频帧，其中，所述当前待标注框对应的第一视频帧为：所检测出的待标注视频中的包含所述当前待标注框所对应目标的且满足第一筛选条件的视频帧；
[0008]获得与所述当前待标注框存在疑似关联关系的推荐框以及每一推荐框对应的第二视频帧，其中，每一推荐框对应的第二视频帧为：所检测出的所述待标注视频中包含该推荐框所对应目标的且满足第二筛选条件的视频帧；
[0009]展示包含所述当前待标注框的所述第一视频帧以及每一推荐框对应的包含该推荐框的第二视频帧，以供用户基于每一推荐框对应的第二视频帧，从所展示推荐框中确定与所述当前待标注框存在关联关系的目标推荐框；
[0010]基于用户的第一关联关系操作信息，从所有推荐框中确定是否存在与所述当前待标注框存在关联关系的目标推荐框，并在确定存在与所述当前待标注框存在关联关系的目标推荐框的情况下，建立所述当前待标注框与所述目标推荐框之间的关联关系。
[0011]可选的，所检测出的待标注视频中的包含所述当前待标注框所对应目标的且满足第一筛选条件的视频帧为：所检测出的待标注视频中的包含所述当前待标注框所对应目标的最后一帧视频帧；
[0012]所检测出的所述待标注视频中包含该推荐框所对应目标的且满足第二筛选条件
的视频帧为：所检测出的所述待标注视频中包含该推荐框所对应目标的首帧视频帧。
[0013]可选的，所述获得待标注视频中的当前待标注框的步骤，通过如下两种实现方式中的任一种实现方式实现：
[0014]第一种实现方式：
[0015]从所述待标注视频对应的未标注框中，确定所对应尾帧视频帧对应的时间戳信息表征采集时间最早的未标注框，作为所述当前待标注框；
[0016]第二种实现方式：
[0017]在检测到用户针对所展示的历史待标注框，从其对应的所展示推荐框中，选中与其存在关联关系的推荐框的情况下，将用户所选中的推荐框，确定为当前待标注框。
[0018]可选的，所述获得与所述当前待标注框存在疑似关联关系的推荐框以及每一推荐框对应的第二视频帧的步骤，包括：
[0019]遍历所述当前待标注框对应的尾帧视频帧之后的N帧视频帧对应的预标注结果，从所述当前待标注框对应的尾帧视频帧之后的N帧视频帧对应的检测框中，确定出所对应框标识满足预设推荐条件的检测框，作为与所述当前待标注框存在疑似关联关系的推荐框，其中，所对应框标识满足预设推荐条件的检测框包括：所对应框标识信息未在所述当前待标注框对应的尾帧视频帧及之前帧中出现过的检测框；
[0020]针对每一与所述当前待标注框存在疑似关联关系的推荐框，将所述当前待标注框对应的尾帧视频帧之后的N帧视频帧中，包含该推荐框对应的目标的满足所述第二筛选条件的视频帧，确定为该推荐框对应的第二视频帧，其中，所述包含该推荐框对应的目标的满足所述第二筛选条件的视频帧包括：所检测出的所述待标注视频中包含该推荐框所对应目标的首帧视频帧。
[0021]可选的，在所述获得与所述当前待标注框存在疑似关联关系的推荐框以及每一推荐框对应的第二视频帧的步骤之前，所述方法还包括：
[0022]判断展示当前待标注框对应的推荐框的展示功能是否启动；
[0023]若启动，执行所述获得与所述当前待标注框存在疑似关联关系的推荐框以及每一推荐框对应的第二视频帧的步骤；
[0024]若未启动，获得所述待标注视频中所述当前待标注框对应的尾帧视频帧之后的M帧视频帧，作为所述当前待标注框对应的待播放视频帧，其中，所述当前待标注框对应的尾帧视频帧为：所检测出的待标注视频中的包含所述当前待标注框所对应目标的尾帧视频帧；
[0025]展示包含所述当前待标注框的所述第一视频帧，并播放所述当前待标注框对应的待播放视频帧，以供用户从所播放的所述当前待标注框对应的待播放视频帧中所包括的检测框中，确定与所述当前待标注框存在关联关系的目标检测框；
[0026]基于用户的第二关联关系操作信息，从所播放的所述当前待标注框对应的待播放视频帧中所包括的标注框中，确定是否存在与所述当前待标注框存在关联关系的目标检测框，并在确定存在与所述当前待标注框存在关联关系的目标检测框的情况下，建立所述当前待标注框与所述目标检测框之间的关联关系。
[0027]可选的，在所述基于用户的第一关联关系操作信息，从所有推荐框中确定是否存在与所述当前待标注框存在关联关系的目标推荐框，并在确定存在与所述当前待标注框存
在关联关系的目标推荐框的情况下，建立所述当前待标注框与所述目标推荐框之间的关联关系的步骤之前，所述方法还包括：
[0028]在检测到用户针对与所述当前待标注框存在疑似关联关系的第一推荐框触发的第一放大指令的情况下，放大展示所述第一推荐框及所述第一推荐框对应的第二视频帧，其中，所述第一放大指令的触发操作包括：右键点击所述第一推荐框对应的第二视频帧；和/或
[0029]在检测到用户针对所述当前待标注框对应的第一视频帧触发的第二放大指令的情况下，放大展示所述当前待标注框对应的第一视频帧。
[0030]可选的，在所述基于用户的第一关联关系操作信息，从所有推荐框中确定是否存在与所述当前待标注框存在关联关系的目标推荐框，并在确定存在与所述当前待标注框存在关联关系的目标推荐框的情况下，建立所述当前待标注框与所述目标推荐框之间的关联关系的步骤之后，所述方法还包括：
[0031]将所述目标推荐框，确定为新的当前待标注框；
[0032]从所述待标注视频中，确定出所检测出的包含所述新的当前待标注框所对应目标的且满足第一筛选条件的视频帧，作为所述新的当前待标注框对应的第一视频帧；...

【技术保护点】

【技术特征摘要】
1.一种目标关联方法，其特征在于，所述方法包括：获得当前待标注框，及所述当前待标注框对应的第一视频帧，其中，所述当前待标注框对应的第一视频帧为：所检测出的待标注视频中的包含所述当前待标注框所对应目标的且满足第一筛选条件的视频帧；获得与所述当前待标注框存在疑似关联关系的推荐框以及每一推荐框对应的第二视频帧，其中，每一推荐框对应的第二视频帧为：所检测出的所述待标注视频中包含该推荐框所对应目标的且满足第二筛选条件的视频帧；展示包含所述当前待标注框的所述第一视频帧以及每一推荐框对应的包含该推荐框的第二视频帧，以供用户基于每一推荐框对应的第二视频帧，从所展示推荐框中确定与所述当前待标注框存在关联关系的目标推荐框；基于用户的第一关联关系操作信息，从所有推荐框中确定是否存在与所述当前待标注框存在关联关系的目标推荐框，并在确定存在与所述当前待标注框存在关联关系的目标推荐框的情况下，建立所述当前待标注框与所述目标推荐框之间的关联关系。2.如权利要求1所述的方法，其特征在于，所检测出的待标注视频中的包含所述当前待标注框所对应目标的且满足第一筛选条件的视频帧为：所检测出的待标注视频中的包含所述当前待标注框所对应目标的最后一帧视频帧；所检测出的所述待标注视频中包含该推荐框所对应目标的且满足第二筛选条件的视频帧为：所检测出的所述待标注视频中包含该推荐框所对应目标的首帧视频帧。3.如权利要求1所述的方法，其特征在于，所述获得待标注视频中的当前待标注框的步骤，通过如下两种实现方式中的任一种实现方式实现：第一种实现方式：从所述待标注视频对应的未标注框中，确定所对应尾帧视频帧对应的时间戳信息表征采集时间最早的未标注框，作为所述当前待标注框；第二种实现方式：在检测到用户针对所展示的历史待标注框，从其对应的所展示推荐框中，选中与其存在关联关系的推荐框的情况下，将用户所选中的推荐框，确定为当前待标注框。4.如权利要求1所述的方法，其特征在于，所述获得与所述当前待标注框存在疑似关联关系的推荐框以及每一推荐框对应的第二视频帧的步骤，包括：遍历所述当前待标注框对应的尾帧视频帧之后的N帧视频帧对应的预标注结果，从所述当前待标注框对应的尾帧视频帧之后的N帧视频帧对应的检测框中，确定出所对应框标识满足预设推荐条件的检测框，作为与所述当前待标注框存在疑似关联关系的推荐框，其中，所对应框标识满足预设推荐条件的检测框包括：所对应框标识信息未在所述当前待标注框对应的尾帧视频帧及之前帧中出现过的检测框；针对每一与所述当前待标注框存在疑似关联关系的推荐框，将所述当前待标注框对应的尾帧视频帧之后的N帧视频帧中，包含该推荐框对应的目标的满足所述第二筛选条件的视频帧，确定为该推荐框对应的第二视频帧，其中，所述包含该推荐框对应的目标的满足所述第二筛选条件的视频帧包括：所检测出的所述待标注视频中包含该推荐框所对应目标的首帧视频帧。5.如权利要求1所述的方法，其特征在于，在所述获得与所述当前待标注框存在疑似关
联关系的推荐框以及每一推荐框对应的第二视频帧的步骤之前，所述方法还包括：判断展示当前待标注框对应的推荐框的展示功能是否启动；若启动，执行所述获得与所述当前待标注框存在疑似关联关系的推荐框以及每一推荐框对应的第二视频帧的步骤；若未启动，获得所述待标注视频中所述当前待标注框对应的尾帧视频帧之后的M帧视频帧，作为所述当前待标注框对应的待播放视频帧，其中，所述当前待标注框对应的尾帧视频帧为：所检测出的待标注视频中的包含所述当前待标注框所对应目标的尾帧视频帧；展示包含所述当前待标注框的所述第一视频帧，并播放所述当前待标注框对应的待播放视频帧，以供用户从所播放的所述当前待标注框对应的待播放视频帧中所包括的检测框中，确定与所述当前待标注框存在关联关系的目标检测框；基于用户的第二关联关系操作信息，从所播放的所述当前待标注框对应的待播放视频帧中所包括的标注框中，确定是否存在与所述当前待标注框存在关联关系的目标检测框，并在确定存在与所述当前待标注框存在关联关系的目标检测框的情况下，建立所述当前待标注框与所述目标检测框之间的关联关系。6.如权利要求1-5任一项所述的方法，其特征在于，在所述基于用户的第一关联关系操作信息，从所有推荐框中确定是否存在与所述当前待标注框存在关联关系的目标推荐框，并在确定存在与所述当前待标注框存在关联关系的目标推荐框的情况下，建立所述当前待标注框与所述目标推荐框之间的关联关系的步骤之前，所述方法还包括：在检测到用户针对与所述当前待标注框存在疑似关联关系的第一...

【专利技术属性】
技术研发人员：叶佩，甘茂霖，董维山，
申请(专利权)人：初速度苏州科技有限公司，
类型：发明
国别省市：