一种基于目标识别和跟踪的视频处理方法与系统技术方案

本申请公开了一种基于目标识别和跟踪的视频处理方法与系统，所述方法包括：采集多路视频图像并进行图像预处理；对经过预处理后的多路视频图像进行拼接，获得初始拼接视频图像；基于目标识别与跟踪算法对初始拼接视频图像进行目标检测，识别每帧视频图像中多个目标的类别并确定每个目标的位置信息；对每帧视频图像进行目标类别与位置标注

【技术实现步骤摘要】
一种基于目标识别和跟踪的视频处理方法与系统
[0001]

[0002]本申请涉及视频图像处理
，具体是涉及一种基于目标识别和跟踪的视频处理方法与系统
。

技术介绍

[0003]运动目标的识别与跟踪是监控系统中的主要研究方向，监控人员基于运动目标的识别与跟踪算法从监控视频图像中获取跟踪目标的信息并对跟踪目标进行观察
。
目前目标识别与跟踪算法主要通过获取多个视频片段并合并成连续的视频，提取视频图像特征信息进行目标类别识别，在连续视频图像序列中追踪目标物体的位置
。
实际操作过程中，对于多个视频片段进行合并时，处于图像边缘位置的运动目标容易出现目标重叠或出现多次的情况，从而影响后续监控人员对跟踪目标观察
。
并且由于监控视频图像边缘的像素往往比监控视频图像中央的像素低，监控人员对于处于图像边缘的跟踪目标难以进行细节捕捉
。
[0004]因此，为了便于监控人员更好的观察追踪目标，如何确保被跟踪目标一直出现在视频图像的非边缘区域是待解决的技术问题
。

技术实现思路

[0005]为了提供跟踪目标一直出现在屏幕预设区域的视频图像以便监控人员观察跟踪目标，本申请提供一种基于目标识别和跟踪的视频处理方法与系统
。
[0006]第一方面，本申请提供一种基于目标识别和跟踪的视频处理方法，包括：采集多路视频图像并进行图像预处理；对经过预处理后的多路视频图像进行拼接，获得初始拼接视频图像；基于目标识别与跟踪算法对初始拼接视频图像进行目标检测，识别每帧视频图像中多个目标的类别并确定每个目标的位置信息；对每帧视频图像进行目标类别标注
、
目标位置标注以及目标编号设置；接收并解析跟踪目标指令，获得跟踪目标编号，确定跟踪目标；根据每帧视频图像中跟踪目标标注的位置信息，筛选跟踪目标的位置处于图像预设区域的各帧视频图像按原拼接顺序进行重新拼接，获得调整后的拼接视频图像；所述图像预设区域为预设的非图像边缘区域
。
[0007]通过采取上述技术方案，利用目标识别与跟踪算法获取初始拼接视频图像中每帧视频中目标类别和位置信息，通过对于每帧视频图像进行信息标注，并根据跟踪目标指令筛选出跟踪目标处于图像预设区域的各帧视频图像，即丢弃跟踪目标处于边缘区域的图像视频，完成对多个视频片段的智能整合，从而使得最终输出的调整后的视频图像中跟踪目标一直出现在屏幕预设区域
。
[0008]优选的，还包括：筛选跟踪目标的位置处于图像预设区域的各帧视频图像之后，将
各帧视频图像按原拼接顺序进行重新拼接之前，获取跟踪目标的位置处于图像预设区域的各帧视频图像中跟踪目标所在位置对应像素信息，筛选出像素大于预设像素的各帧视频图像
。
[0009]通过采取上述技术方案，为了进一步便于监控人员观察跟踪目标，设置预设像素，筛选处于图像预设区域的跟踪目标所在位置像素大于预设像素的视频图像，保证最终进行拼接的各视频图像中跟踪目标都具有较好的像素，便于观察
。
[0010]优选的，所述接收并解析跟踪目标指令具体为：定时接收跟踪目标指令；设置跟踪目标指令的过滤规则，判断接收的跟踪目标指令是否合法；若接收的跟踪目标指令合法，则保留跟踪目标指令并存储至跟踪目标指令缓冲区；若不合法则丢弃接收的跟踪目标指令；定时处理跟踪目标指令缓冲区中的跟踪目标指令，解析获取跟踪目标编号，确定跟踪目标
。
[0011]通过采用上述技术方案，定时的接收跟踪目标指令，不同的跟踪目标指令对应不同编号的跟踪目标，将不同跟踪目标指令存储至跟踪目标指令缓冲区，定时的处理相应的不同跟踪目标指令以完成跟踪目标的切换，满足对不同的跟踪目标进行跟踪监控的需要
。
同时，设置指令的过滤规则，仅接收合法的跟踪目标指令并进行解析，防止不合法的跟踪指令扰乱监控人员的观察
。
[0012]优选的，所述跟踪目标指令设置有优先级等级，保留的跟踪目标指令按优先级从高至低的顺序存储至跟踪目标指令缓冲区
。
[0013]通过采用上述技术方案，对跟踪目标指令进行优先级设置，对于某些目标优先进行跟踪观察
。
[0014]优先的，还包括：处理的每个历史跟踪目标指令均对应解析获得一个历史跟踪目标编号，每个历史跟踪目标编号代表一个历史跟踪目标，获取每个历史跟踪目标对应的调整后的拼接视频图像，存储每个历史跟踪目标编号以及每个跟踪目标对应的调整后的拼接视频图像；针对当前待处理的跟踪目标指令时，解析当前跟踪目标指令获得的当前跟踪目标编号，判断是否存在与当前跟踪目标编号相同的历史跟踪目标；若存在，则直接调用编号相同的历史跟踪目标对应的调整后的拼接视频图像；若不存在，则根据每帧视频图像中当前跟踪目标标注的位置信息，筛选当前跟踪目标的位置处于图像预设区域的各帧视频图像按原拼接顺序进行重新拼接，获得当前跟踪目标对应的调整后的拼接视频图像
。
[0015]通过采用上述技术方案，针对确定的跟踪目标编号进行视频图像的筛选形成对应的调整后的拼接视频图像，若完成对一个跟踪目标的跟踪观察，需要切换回对前一个跟踪目标的观察，无需再重新进行视频图像的筛选，可直接调用相同编号的历史跟踪目标对应的调整后的拼接视频图像
。
[0016]优选的，所述图像预设区域具体为：图像预设区域的原点为以每帧图像中心位置，图像预设区域边缘的横坐标范围为每帧图像边缘对应的横坐标的
(1/2,3/4)
，图像预设区域边缘的纵坐标坐标为每帧图像边缘对应的纵坐标的
(1/2,3/4)。
[0017]通过采用上述技术方案，按上述的横
/
纵坐标选择范围，以原图像中心为原点，选
取到原图像面积的
1/4
至
9/16
的中间区域作为图像预设区域，设置预设区域属于非边缘区域
。
[0018]优选的，所述对经过预处理后的多路视频图像进行拼接具体为：自多路视频图像中选取一路视频图像并以拍摄该路视频图像的设备所在地理位置为原点建立坐标轴；获取拍摄多路视频图像的各设备所在的地理位置在坐标轴中的横坐标；以拍摄多路视频图像的各设备所在的地理位置在坐标轴中的横坐标大小顺序作为多路视频图像的排序，根据多路视频图像的排序依次对预处理后的多路视频图像进行拼接
。
[0019]通过采用上述技术方案，根据拍摄多路视频图像的各设备所在的地理位置的几何关系确定多路视频图像的拼接顺序，初始拼接视频图像中地理位置相邻的两路视频图像拼接在一起，便于观察跟踪目标的运动过程
。
[0020]第二方面，一种基于目标识别和跟踪的视频处理系统，包括：视频图像采集与处理模块，用于采集多路视频图像并进行图像预处理；初始拼接视频图像获取模块，用于对经过预处理后的多路视频图像进行拼接，获得初始拼接视频图像；目标识别与跟踪模块，用于基于目标识别与跟踪算法对初始拼接视频图像进行目标检本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种基于目标识别和跟踪的视频处理方法，其特征在于，包括：采集多路视频图像并进行图像预处理；对经过预处理后的多路视频图像进行拼接，获得初始拼接视频图像；基于目标识别与跟踪算法对初始拼接视频图像进行目标检测，识别每帧视频图像中多个目标的类别并确定每个目标的位置信息；对每帧视频图像进行目标类别标注
、
目标位置标注以及目标编号设置；接收并解析跟踪目标指令，获得跟踪目标编号，确定跟踪目标；根据每帧视频图像中跟踪目标标注的位置信息，筛选跟踪目标的位置处于图像预设区域的各帧视频图像按原拼接顺序进行重新拼接，获得调整后的拼接视频图像；所述图像预设区域为预设的非图像边缘区域
。2.
根据权利要求1所述的基于目标识别和跟踪的视频处理方法，其特征在于，还包括：筛选跟踪目标的位置处于图像预设区域的各帧视频图像之后，将各帧视频图像按原拼接顺序进行重新拼接之前，获取跟踪目标的位置处于图像预设区域的各帧视频图像中跟踪目标所在位置对应像素信息，筛选出像素大于预设像素的各帧视频图像
。3.
根据权利要求1所述的基于目标识别和跟踪的视频处理方法，其特征在于，所述接收并解析跟踪目标指令具体为：定时接收跟踪目标指令；设置跟踪目标指令的过滤规则，判断接收的跟踪目标指令是否合法；若接收的跟踪目标指令合法，则保留跟踪目标指令并存储至跟踪目标指令缓冲区；若不合法则丢弃接收的跟踪目标指令；定时处理跟踪目标指令缓冲区中的跟踪目标指令，解析获取跟踪目标编号，确定跟踪目标
。4.
根据权利要求3所述的基于目标识别和跟踪的视频处理方法，其特征在于，所述跟踪目标指令设置有优先级等级，保留的跟踪目标指令按优先级从高至低的顺序存储至跟踪目标指令缓冲区
。5.
根据权利要求1所述的基于目标识别和跟踪的视频处理方法，其特征在于，还包括：处理的每个历史跟踪目标指令均对应解析获得一个历史跟踪目标编号，每个历史跟踪目标编号代表一个历史跟踪目标，获取每个历史跟踪目标对应的调整后的拼接视频图像，存储每个历史跟踪目标编号以及每个跟踪目标对应的调整后的拼接视频图像；针对当前待处理的跟踪目标指令，解析当前跟踪目标指令获得的当前跟踪目标编号，判断是否存在与当前跟踪目标编号相同的历史跟踪目标；若存在，则直接调用编号相同的历史跟踪目标对应的调整后的拼接视频图像；若不存在，则根据每帧视频图像中当前跟踪目标标注的位置信息，筛选当前跟踪目标的位置处于图像预设区域的各帧视频...

【专利技术属性】
技术研发人员：王勇，
申请(专利权)人：南京芯传汇电子科技有限公司，
类型：发明
国别省市：