一种基于视频检测的OSD叠加方法技术

本发明专利技术公开了一种基于视频检测的OSD叠加方法。现有方法可能覆盖视频图像中的人像，导致后续视频智能分析对人像的检测提取，甚至丢失目标人像的关键图像。本发明专利技术方法首先进行人像检测、电子围栏获取手机号码信息，并以虚拟框形式动态跟踪人像的移动跟踪人像目标区域，然后通过判断手机信息OSD需占用空间，选择非人像虚拟框区域进行OSD字符叠加，手机号码信息的OSD字符叠加信息与视频图像一起统一进行编码，形成视频流进行传输、存储及应用。本发明专利技术方法充分应用了视频智能分析中识别出的人像区域，并在OSD字符叠加中进行明确的目标回避，完全避免了对人像关键信息的遮挡。

An OSD overlay method based on video detection

【技术实现步骤摘要】
一种基于视频检测的OSD叠加方法
本专利技术属于通信
，具体涉及一种基于视频检测的OSD(on-screendisplay，屏幕字符叠加显示)叠加方法。
技术介绍
在视频监控中，为了在视频图像中显示摄像头的名称或位置、属性及摄录时间等信息，摄像机通过系统配置，将需要显示的信息的字符叠加在视频图像上，一般处于图像的上部、而摄像机的位置等属性信息处于图像的下部。字符叠加的主要目的是为了让监看视频以及事后检索回放视频图像的时候清楚当时的信息。但是在复合型多维采集的前端设备中，除了视频图像的采集外，前端设备中的电子侦码设备还采集了当前场景中的人员持有手机的手机号、IMSI/IMEI等信息。当更多的手机号码相关信息需要叠加到视频图像中时，如果固定在一个位置可能会遮盖关键人脸。基于物联网的视频监控图像采集中，为了实现通信、供电、立杆等的基础设施资源的最大化利用，往往实现了一杆多采的策略，同一立杆中复合部署了WIFI、手机侦码等技术手段。为了实现视频图像中出现的人像与同时通过手机侦码捕获到的周边的手机号码、IMSI、IMEI等信息的同时呈现，需要采用OSD技术将手机号码相关信息以字符叠加的形式叠加在视频图像中，实现所见人像即可知道该人持有手机的信息(人像关联手机信息)，即所见即所得的AR特性。但是当视频图像中出现多个人像、以及人像移动时，固定的OSD位置必然可能覆盖视频图像中出现的人像，导致后续的视频智能分析对人像的检测提取，甚至丢失目标人像的关键图像。申请号为“201310739553.4”的中国专利技术专利公开了一种能支持多种颜色及自动反色的字符叠加显示方法，该显示方法步骤是：首先需要根据叠加的字符的位置及字体大小信息，计算出该字符所在位置的背景图像的亮度平均值，该亮度平均值需要和设定值做比较，以决定是显示设定的字符显示颜色还是与设定值相反的字符显示颜色；然后根据上面亮度值的判断结果，动态去修改freetype产生的字模信息，如果用本色显示，不做任何处理，如果用反色显示，修改字模相应值为相反颜色的颜色索引值；再对颜色查找表进行处理及更新，如果是单色，颜色查找表中填充相同的yuv值即可；如果需要实现正反两种颜色，在同一张表中交替填充两种颜色的yuv值。该专利技术的目的是为了突出显示OSD的信息，当OSD位置的背景图像影响字符显示时，通过分析背景亮度值自动匹配拟显示的字符颜色。但是该方法无法避免对背景图像信息的覆盖，即使采用了反色或其他显色处理，依然覆盖了OSD字符区域的背景信息。在视频图像的人脸、人像信息至关重要时，反而严重影响了人脸、人像的智能识别。申请号为“201410247922.2”的中国专利技术专利公开了一种对视频图像进行字符叠加的方法及装置。其中，该方法包括：从字符叠加OSD配置结构中获取OSD字符信息，所述OSD字符信息包括字符内容、字符位置和字库，所述字符位置为字符内容在视频图像中的显示位置；从内存的视频图像中拷贝与字符位置对应的图像，存储到缓存区中；在缓存区中，根据字库将OSD字符信息包含的字符内容叠加到拷贝的图像中，得到叠加后的字符图像，将叠加后的字符图像拷贝回内存；在内存中将字符图像叠加到视频图像中所述显示位置对应的位置。该方法能够减少进行字符叠加时对系统资源的占用，且提高叠加效率。该专利技术主要是为了减少字符叠加对系统资源的占用，通过局部提取OSD位置视频截图，通过在缓存中完成OSD字符叠加算法，然后返回叠加好的视频截图。但是该方法没有对背景关键信息进行回避，OSD字符叠加后，背景信息依然被覆盖，影响背景中人脸、人像等关键信息的智能分析提取。
技术实现思路
本专利技术的目的就是针对现有技术的不足，提供一种基于视频检测的OSD叠加方法。本专利技术方法为了避免覆盖视频中的人像，本专利技术方法先对图像中的人像进行检测分析，标定出人像位置，然后对采集到手机相关信息的OSD进行人像位置的回避，将其叠加在无人像或人像信息相对低频(即色差小，纹理小)的区域叠加OSD。当摄像机通过人像比对发现预先输入系统的布控人员，在视频图像上跟踪标注出人像位置；通过联动电子围栏诱导附近的手机注册到电子围栏侦码基站，电子围栏侦码基站将捕获到的手机号码、IMSI、IMEI等信息反馈给该摄像机；摄像机此信息以OSD动态叠加在未标注人像的空白位置，或者优选相对低频(即色差小，纹理小)的区域叠加OSD。从而，便于工作人员直观的看到关于布控人员的相关信息。本专利技术方法具体如下：(1).人像检测、电子围栏获取手机号码信息：(1-1).在某个时点，当视频图像中出现一个或多个人像，启动人像识别与布控比对，视频智能分析系统通过人脸+人体识别人像，并在视频图像中以虚拟框的形式进行标注，该虚拟框实际显示或不显示；视频智能分析系统通过人脸或人像识别算法检测、匹配、跟踪及识别人像目标，当人脸清晰度达到人脸识别的像素要求，完成人脸布控与比对；当人脸清晰度无法满足人脸识别比对的像素要求时，视频智能分析系统通过结合人体模型匹配做人脸+人体的模型进行人像识别与比对；(1-2).电子围栏系统的侦码通过通讯协议获取基站附近的手机信息，包括IMSI信息、IMEI信息，进而获取手机号码信息；将人像虚拟框位置信息、手机号码信息均并发送给OSD字符叠加系统。进一步，电子围栏系统获取包括手机号码信息的方法是：通过电子围栏系统识别出该手机的IMEI、IMSI串号信息；获取了IMSI后，通过约定的信令发送给运营商系统，获得该IMSI对应的手机号码；或者，电子围栏系统以伪基站的同频/异频工作形式诱联手机，只要手机处于待机状态，电子围栏系统自动连接手机，获取手机号码、IMEI、IMSI串号信息；电子围栏系统采集完后，即关闭诱联。(2).对人像实时保持跟踪，并以虚拟框形式动态跟踪人像的移动跟踪人像目标区域。(3).OSD叠加手机信息：OSD字符叠加服务系统实时接收手机号码信息，同时接收人像虚拟框的位置信息，通过判断手机信息OSD需占用空间，选择非人像虚拟框区域进行OSD字符叠加；当多个手机信息作为一个整段无法找到合适的非人像区域时，则将手机信息拆分成多段，分别叠加在多个非人像区域；(3-1).选择非人像区域时，选择空白区域的中心位置或画面的最边缘位置；如果画面中存在多个人脸/人像，则选择多个人像的中间位置；如果画面中只有一个人脸/人像，或人脸/人像比较集中，则手机号码选择画面边缘；(3-2).判断摄像机目前执行的功能：如果当前摄像机正在执行目标跟踪的功能，则优选边缘区域进行OSD叠加；如果摄像机停止目标跟踪，以固定的姿态采集视频，则按照(3-1)的策略进行OSD叠加。手机号码信息的OSD叠加字符按照《视频图像文字标注规范》(GA/T751-2008)要求设置。(4).统一编码进视频流：手机号码信息的OSD字符叠加信息与视频图像一起统一进行编码，形成视频流进行传输、存储及应用；手机号码信息叠加在视频图像中，根据既有视频图像中按照《视频图像文字标注规范》(GA/T本文档来自技高网...

【技术保护点】
1.一种基于视频检测的OSD叠加方法，其特征在于该方法具体如下：/n(1).人像检测、电子围栏获取手机号码信息：/n(1-1).在某个时点，当视频图像中出现一个或多个人像，启动人像识别与布控比对，视频智能分析系统通过人脸+人体识别人像，并在视频图像中以虚拟框的形式进行标注，该虚拟框实际显示或不显示；/n视频智能分析系统通过人脸或人像识别算法检测、匹配、跟踪及识别人像目标，当人脸清晰度达到人脸识别的像素要求，完成人脸布控与比对；当人脸清晰度无法满足人脸识别比对的像素要求时，视频智能分析系统通过结合人体模型匹配做人脸+人体的模型进行人像识别与比对；/n(1-2).电子围栏系统的侦码通过通讯协议获取基站附近的手机信息，包括IMSI信息、IMEI信息，进而获取手机号码信息；将人像虚拟框位置信息、手机号码信息均并发送给OSD字符叠加系统；/n(2).对人像实时保持跟踪，并以虚拟框形式动态跟踪人像的移动跟踪人像目标区域：/n(3).OSD叠加手机信息：/nOSD字符叠加服务系统实时接收手机号码信息，同时接收人像虚拟框的位置信息，通过判断手机信息OSD需占用空间，选择非人像虚拟框区域进行OSD字符叠加；当多个手机信息作为一个整段无法找到合适的非人像区域时，则将手机信息拆分成多段，分别叠加在多个非人像区域；/n(4).统一编码进视频流：/n手机号码信息的OSD字符叠加信息与视频图像一起统一进行编码，形成视频流进行传输、存储及应用。/n...

【技术特征摘要】
1.一种基于视频检测的OSD叠加方法，其特征在于该方法具体如下：
(1).人像检测、电子围栏获取手机号码信息：
(1-1).在某个时点，当视频图像中出现一个或多个人像，启动人像识别与布控比对，视频智能分析系统通过人脸+人体识别人像，并在视频图像中以虚拟框的形式进行标注，该虚拟框实际显示或不显示；
视频智能分析系统通过人脸或人像识别算法检测、匹配、跟踪及识别人像目标，当人脸清晰度达到人脸识别的像素要求，完成人脸布控与比对；当人脸清晰度无法满足人脸识别比对的像素要求时，视频智能分析系统通过结合人体模型匹配做人脸+人体的模型进行人像识别与比对；
(1-2).电子围栏系统的侦码通过通讯协议获取基站附近的手机信息，包括IMSI信息、IMEI信息，进而获取手机号码信息；将人像虚拟框位置信息、手机号码信息均并发送给OSD字符叠加系统；
(2).对人像实时保持跟踪，并以虚拟框形式动态跟踪人像的移动跟踪人像目标区域：
(3).OSD叠加手机信息：
OSD字符叠加服务系统实时接收手机号码信息，同时接收人像虚拟框的位置信息，通过判断手机信息OSD需占用空间，选择非人像虚拟框区域进行OSD字符叠加；当多个手机信息作为一个整段无法找到合适的非人像区域时，则将手机信息拆分成多段，分别叠加在多个非人像区域；
(4).统一编码进视频流：
手机号码信息的OSD字符叠加信息与视频图像一起统一进行编码，形成视频流进行传输、存储及应用。


2.如权利要求1所述的一种基...

【专利技术属性】
技术研发人员：周子容，杨工明，李衡，徐勇，叶隽毅，李嘉仪，
申请(专利权)人：杭州亿圣信息技术有限公司，
类型：发明
国别省市：浙江;33