智能视频监控识别性能评价系统及方法技术方案

本发明专利技术公开了一种智能视频监控识别性能评价系统及方法，该系统包括：摄像头光学测试平台将从基准视频/图像识别评价平台获取的基准数据集中的视频/图像通过投影仪投影到投影幕布上，通过投影幕布反射视频/图像光信号至被测样品光学镜头；基准视频/图像识别评价平台接收被测样品光学镜头对视频/图像光信号进行采集分析后的识别结果，将识别结果和基准数据集中的视频/图像的识别标定正确结果进行比对，基于比对结果对被测样品光学镜头的监控识别性能进行评价。本发明专利技术克服了传统客观基准数据集方法不能评价无法提供视频/图像数据模型调用接口的智能视频监控系统。相较于传统现场实景测试评价方法，本发明专利技术具有客观性，评价精度高。

【技术实现步骤摘要】
智能视频监控识别性能评价系统及方法
本专利技术涉及视频监控识别
，尤其涉及智能视频监控识别性能评价系统及方法。
技术介绍
本部分旨在为权利要求书中陈述的本专利技术实施例提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。随着社会的发展，安全意识不断提高，视频监控被广泛应用在道路交通、城市治安监控、机场、地铁、金融银行、海关、边防安检等各个领域中重要部位和场所，深入人们的生产生活。面对广泛部署的摄像头带来的海量数据上传和存储压力，智能视频监控通过识别算法对影像进行分析，将信息转换成有价值数据，再以关键性的信息向使用者提供警示，去除大量冗余信息，为目标监控管理提供高效精确的信息化、智能化手段。不仅节省视频数据上传网络带宽和存储空间，而且改变传统视频监控依靠人工检测和处理，降低监测难度，能够及时处理故障，运维成本大大降低。传统的智能视频监控识别性能的评价方法主要分2类。一类是从软件层面评价识别算法的性能，即将基准图像数据集作为软件输入参数，验证识别算法的鲁棒性、准确度和识别速度，不考虑智能视频监控产品/系统的光学镜头的成像失真、A/D转换的量化误差、像素填充误差等因素，没有综合评价整个智能视频监控产品/系统的识别性能。特别是，对于不能提供视频/图像信号数据模型调用接口的智能视频监控产品/系统，由于基准测试视频/图像信号不能作为算法的输入参数，因此，无法使用该方法进行识别性能评价。另一类是通过现场实景测试，通过人为观看的主观方式来判断识别结果是否正确，主观评价整个智能视频监控产品/系统的识别性能。该类方法具有如下问题：一方面，测试过程不可复现，测试样本空间受限，视频/图像数据集缺乏完备性，不能用于评价识别算法的鲁棒性。另一方面，借助滞后的、低效的人工评价，测试周期长，成本高，评价精度低。
技术实现思路
本专利技术实施例提供一种智能视频监控识别性能评价系统，用以实现可以对无法提供视频/图像数据模型调用接口的智能视频监控系统的评价和客观性评价，该系统包括：摄像头光学测试平台和基准视频/图像识别评价平台，所述摄像头光学测试平台包括投影仪和投影幕布；摄像头光学测试平台用于：将从所述基准视频/图像识别评价平台获取的基准数据集中的视频/图像通过投影仪投影到投影幕布上，通过投影幕布反射视频/图像光信号至被测样品光学镜头；基准视频/图像识别评价平台用于：接收被测样品光学镜头对视频/图像光信号进行采集分析后的识别结果，将所述识别结果和基准数据集中的视频/图像的识别标定正确结果进行比对，基于比对结果对被测样品光学镜头的监控识别性能进行评价。本专利技术实施例还提供一种智能视频监控识别性能评价方法，用以实现对无法提供视频/图像数据模型调用接口的智能视频监控系统的评价和客观性评价，该方法包括：基准视频/图像识别评价平台将基准数据集中的视频/图像输入摄像头光学测试平台的投影仪；投影仪将基准数据集中的视频/图像投影到投影幕布上；投影幕布反射视频/图像光信号至被测样品光学镜头；被测样品光学镜头对视频/图像光信号进行采集分析，获得识别结果，并将识别结果传输至基准视频/图像识别评价平台；基准视频/图像识别评价平台接收所述识别结果，将所述识别结果和基准数据集中的视频/图像的识别标定正确结果进行比对，基于比对结果对被测样品光学镜头的监控识别性能进行评价；其中，摄像头光学测试平台包括投影仪和投影幕布。本专利技术实施例还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述智能视频监控识别性能评价方法。本专利技术实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有执行上述智能视频监控识别性能评价方法的计算机程序。本专利技术实施例中，基于投影仪投影基准数据集中的视频/图像至投影幕布上，通过投影幕布反射视频/图像光信号至被测样品光学镜头，这样可以实现对无法提供视频/图像数据模型调用接口的智能视频监控系统的评价；被测样品光学镜头对视频/图像光信号进行采集分析，获得识别结果，基准视频/图像识别评价平台接收所述识别结果，将所述识别结果和基准数据集中的视频/图像的识别标定正确结果进行比对，基于比对结果对被测样品光学镜头的监控识别性能进行评价，相较于传统现场实景测试评价方法，本专利技术通过与识别标定正确结果进行比对，具有客观性，评价精度高。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：图1为本专利技术实施例中智能视频监控识别性能评价系统结构框图一；图2为本专利技术实施例中智能视频监控识别性能评价系统结构框图二；图3为本专利技术实施例中智能视频监控识别性能评价系统结构框图三；图4为本专利技术实施例中智能视频监控识别性能评价方法流程图一；图5为本专利技术实施例中智能视频监控识别性能评价方法流程图二。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚明白，下面结合附图对本专利技术实施例做进一步详细说明。在此，本专利技术的示意性实施例及其说明用于解释本专利技术，但并不作为对本专利技术的限定。基于现有技术中存在的问题，本专利技术提出一种智能视频监控识别性能评价系统，如图1至图3所示，该系统包括：摄像头光学测试平台1和基准视频/图像识别评价平台2，所述摄像头光学测试平台包括投影仪11和投影幕布12；摄像头光学测试平台用于：将从所述基准视频/图像识别评价平台获取的基准数据集中的视频/图像通过投影仪投影到投影幕布上，在投影幕布上播放/显示，通过投影幕布反射视频/图像光信号至被测样品光学镜头3(即被测产品)；基准视频/图像识别评价平台用于：接收被测样品光学镜头对视频/图像光信号进行采集分析后的识别结果，将所述识别结果和基准数据集中的视频/图像的识别标定正确结果进行比对，基于比对结果对被测样品光学镜头的监控识别性能进行评价。在本专利技术实施例中，如图2所示，所述摄像头光学测试平台还包括光学暗室13，所述投影仪、投影幕布和被测样品光学镜头放置于光学暗室内。这样减少外部的背景光噪声的干扰。在本专利技术实施例中，如图2所示，所述摄像头光学测试平台还包括测试台14，所述被测样品光学镜头放置于测试台上。该测试台可以是一个摄像头支架，也可以是柱体物，只要能放置被测样品光学镜头即可。在本专利技术实施例中，如图3所示，所述摄像头光学测试平台还包括投影仪控制设备15，用于对所述投影仪进行控制，可以控制投影仪的一些放映参数等等。投影仪控制设备15也可以不属于摄像头光学测试平台，而是单独设置的一个设备。在本专利技术实施例中，如图2和图3所示，所述基准视频/图像识别评价平台2包括基准视频/图像服务器21和识别评价服务器22；本文档来自技高网...

【技术保护点】
1.一种智能视频监控识别性能评价系统，其特征在于，包括：摄像头光学测试平台和基准视频/图像识别评价平台，所述摄像头光学测试平台包括投影仪和投影幕布；/n摄像头光学测试平台用于：将从所述基准视频/图像识别评价平台获取的基准数据集中的视频/图像通过投影仪投影到投影幕布上，通过投影幕布反射视频/图像光信号至被测样品光学镜头；/n基准视频/图像识别评价平台用于：接收被测样品光学镜头对视频/图像光信号进行采集分析后的识别结果，将所述识别结果和基准数据集中的视频/图像的识别标定正确结果进行比对，基于比对结果对被测样品光学镜头的监控识别性能进行评价。/n

【技术特征摘要】
1.一种智能视频监控识别性能评价系统，其特征在于，包括：摄像头光学测试平台和基准视频/图像识别评价平台，所述摄像头光学测试平台包括投影仪和投影幕布；
摄像头光学测试平台用于：将从所述基准视频/图像识别评价平台获取的基准数据集中的视频/图像通过投影仪投影到投影幕布上，通过投影幕布反射视频/图像光信号至被测样品光学镜头；
基准视频/图像识别评价平台用于：接收被测样品光学镜头对视频/图像光信号进行采集分析后的识别结果，将所述识别结果和基准数据集中的视频/图像的识别标定正确结果进行比对，基于比对结果对被测样品光学镜头的监控识别性能进行评价。


2.如权利要求1所述的智能视频监控识别性能评价系统，其特征在于，所述摄像头光学测试平台还包括光学暗室，所述投影仪、投影幕布和被测样品光学镜头放置于光学暗室内。


3.如权利要求1所述的智能视频监控识别性能评价系统，其特征在于，所述摄像头光学测试平台还包括测试台，所述被测样品光学镜头放置于测试台上。


4.如权利要求1所述的智能视频监控识别性能评价系统，其特征在于，所述摄像头光学测试平台还包括投影仪控制设备，用于对所述投影仪进行控制。


5.如权利要求1所述的智能视频监控识别性能评价系统，其特征在于，所述基准视频/图像识别评价平台包括基准视频/图像服务器和识别评价服务器；
所述基准视频/图像服务器用于：存储基准数据集和基准数据集中的视频/图像的识别标定正确结果；将基准数据集中的视频/图像输入到投影仪；
所述识别评价服务器用于：接收被测样品光学镜头对视频/图像光信号进行采集分析后的识别结果；从所述基准视频/图像服务器获取基准数据集中的视频/图像的识别标定正确结果；...

【专利技术属性】
技术研发人员：李志斌，张小雨，张睿，周佳琳，
申请(专利权)人：中国信息通信研究院，
类型：发明
国别省市：北京;11