一种图像处理方法、装置及机器可读存储介质制造方法及图纸

本申请提供一种图像处理方法、装置及机器可读存储介质，该方法包括：对监控视频帧进行目标检测与跟踪，以确定同一目标在各监控视频帧中的位置信息；根据所述同一目标在各监控视频帧中的位置信息，确定该目标在所述各监控视频帧中对应的感兴趣区域ROI区域；基于所述各监控视频帧中的ROI区域的质量评分对ROI区域的图像序列进行增强处理；对增强处理后的所述图像序列进行编码传输。该方法可以提高图像质量优化的效果。量优化的效果。量优化的效果。

【技术实现步骤摘要】
一种图像处理方法、装置及机器可读存储介质


[0001]本申请涉及视频监控领域，尤其涉及一种图像处理方法、装置及机器可读存储介质。

技术介绍

[0002]近年来，随着科技的不断发展，越来越多的智能相机被应用到监控场景，完成特定的任务。例如，人脸抓拍机可以实时检测监控画面中的人脸，并将检测到的人脸图像传输到服务器进行人脸识别；交通抓拍机可以帮助交通管理部门快速有效的监控违法车辆，并对违法车辆进行抓拍取证。
[0003]然而，由于受到光照、相机架设高度、目标运动等因素的影响，最终获得目标图像中的感兴趣区域(region of interest，简称ROI)的质量一般差距较大，有些图像质量较优，但是很多时候可能存在模糊、亮度不足、对比度不足等质量较差的情况。
[0004]针对上述情况，目前的解决方案是在后端对解码后的图像数据进行优化处理，提升监控图像中的ROI区域的亮度和轮廓细节，控制ROI区域颜色，从而达到提高ROI区域图像清晰度的目的。
[0005]实践发现，上述解决方案对ROI区域进行处理时的信息已经是经过网络传输后解码的图像数据，此时的信息由于经过编码压缩，丢失较为严重，后续处理提升有限；此外，目前的解决方案只针对交通车辆信息进行处理，适用场景有限。

技术实现思路

[0006]有鉴于此，本申请提供一种图像处理方法及其装置。
[0007]具体地，本申请是通过如下技术方案实现的：
[0008]根据本申请实施例的第一方面，提供一种图像处理方法，应用于视频监控前端设备，所述方法包括：
[0009]对监控视频帧进行目标检测与跟踪，以确定同一目标在各监控视频帧中的位置信息；
[0010]根据所述同一目标在各监控视频帧中的位置信息，确定该目标在所述各监控视频帧中对应的ROI区域；
[0011]根据所述各监控视频帧中的ROI区域的质量评分，从缓存的原始格式的监控视频帧中截取ROI区域，并对截取的原始格式的ROI区域的图像序列进行增强处理；
[0012]对增强处理后的所述图像序列进行编码传输。
[0013]根据本申请实施例的第二方面，提供一种图像处理装置，应用于视频监控前端设备，所述装置包括：
[0014]目标检测单元，用于对监控视频帧进行目标检测与跟踪，以确定同一目标在各监控视频帧中的位置信息；
[0015]确定单元，用于根据所述同一目标在各监控视频帧中的位置信息，确定该目标在
所述各监控视频帧中对应的感兴趣区域ROI区域；
[0016]截取单元，用于根据所述各监控视频帧中的ROI区域的质量评分，从缓存的原始格式的监控视频帧中截取ROI区域；
[0017]增强处理单元，用于对截取的原始格式的ROI区域的图像序列进行增强处理；
[0018]传输单元，用于对增强处理后的所述图像序列进行编码传输。
[0019]根据本申请实施例的第三方面，提供一种图像处理装置，包括处理器和机器可读存储介质，所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令，所述处理器被所述机器可执行指令促使执行上述图像处理方法。
[0020]根据本申请实施例的第四方面，提供一种机器可读存储介质，存储有机器可执行指令，在被处理器调用和执行时，所述机器可执行指令促使所述处理器执行上述图像处理方法。
[0021]本申请实施例的图像处理方法，通过视频监控前端设备对监控视频帧进行目标检测与跟踪，以确定同一目标在各监控视频帧中的位置信息，并根据同一目标在各监控视频帧中的位置信息，确定该目标在所述各监控视频帧中对应的感兴趣区域ROI区域，进而，根据各监控视频帧中的ROI区域的质量评分，从缓存的原始格式的监控视频帧中截取ROI区域，对截取的原始格式的ROI区域的图像序列进行增强处理，并对增强处理后的所述图像序列进行编码传输，避免了压缩传输过程中的信息丢失对图像质量优化的影响，提高了图像质量优化的效果；此外，图像质量优化不再限于车辆，扩展了方案的适用场景。
附图说明
[0022]图1是本申请一示例性实施例示出的一种图像处理方法的流程图；
[0023]图2是本申请一示例性实施例示出的一种具体应用场景的结构示意图；
[0024]图3A是本申请一示例性实施例示出的一种第一处理模块的结构示意图；
[0025]图3B是本申请一示例性实施例示出的一种第二子处理单元的结构示意图；
[0026]图3C是本申请一示例性实施例示出的一种第二处理模块的结构示意图；
[0027]图4是本申请一示例性实施例示出的一种图像处理装置的结构示意图；
[0028]图5是本申请一示例性实施例示出的一种图像处理装置的硬件结构示意图。
具体实施方式
[0029]这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
[0030]在本申请使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。
[0031]为了使本领域技术人员更好地理解本申请实施例提供的技术方案，下面先对本申请中描述的原始格式进行简单说明。
[0032]原始格式是指图像传感器将捕捉到的光源信号转化为数字信号的原始数据格式，
该原始数据为包含来自一个或多个光谱波段的感应数据。
[0033]示例性的，该原始数据可以包括对波长范围是380nm～780nm、和/或780nm～2500nm的光谱波段的光信号采样所得的感应数据。
[0034]例如，RGB传感器感光得到的RAW(未经加工的)图像信号。
[0035]示例性的，成像设备采集光源信号，将采集到的光源信号转换为模拟信号，将模拟信号转换为数字信号，将数字信号输入到处理芯片进行处理(该处理可以包括位宽裁剪、图像处理和编解码处理等)，得到第二数据格式(原始格式可以称为第一数据格式)的数据，将第二数据格式的数据传输给显示设备进行显示或其他设备进行处理。
[0036]可见，原始格式的图像为传感器将采集到的光源信息转换为数字信号时的图像，该图像未经过处理芯片进行处理，位宽高，相比于经过位宽裁剪、图像处理和编解码处理的第二数据格式的图像，包含更丰富的图像信息。
[0037]为了使本申请实施例的上述目的、特征和优点能够更加明显易懂，下面结合附图对本申请实施例中技术方案作进一步详细的说明。
[0038]请参见图1，为本申请实施例提供的一种图像处理方法的流程示意图，其中，该图像处理方法可以应用于视频监控前端设备，如IPC(Internet Protocol Camera，网络摄像本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法，其特征在于，应用于视频监控前端设备，所述方法包括：对监控视频帧进行目标检测与跟踪，以确定同一目标在各监控视频帧中的位置信息；根据所述同一目标在各监控视频帧中的位置信息，确定该目标在所述各监控视频帧中对应的感兴趣区域ROI区域；根据所述各监控视频帧中的ROI区域的质量评分，从缓存的原始格式的监控视频帧中截取ROI区域，并对截取的原始格式的ROI区域的图像序列进行增强处理；对增强处理后的所述图像序列进行编码传输。2.根据权利要求1所述的方法，其特征在于，所述对监控视频帧进行目标检测与跟踪，以确定同一目标在各监控视频帧中的位置信息，包括：基于神经网络，对所述监控视频帧进行目标检测与跟踪，以确定同一目标在各监控视频帧中的位置信息。3.根据权利要求1所述的方法，其特征在于，所述根据所述各监控视频帧中的ROI区域的质量评分，从缓存的原始格式的监控视频帧中截取ROI区域，包括：确定所述各监控视频帧中的ROI区域的质量评分；基于所述各监控视频帧中的ROI区域的质量评分，从缓存的原始格式的监控视频帧中，截取质量评分高于预设评分阈值的ROI区域。4.根据权利要求3所述的方法，其特征在于，所述对截取的原始格式的ROI区域的图像序列进行增强处理，包括：从输入的所述原始格式的ROI区域的图像序列中的多帧图像中选取参考帧；基于所述参考帧对所述多帧图像对进行对齐；基于对齐后的所述多帧图像之间的互补信息，对所述多帧图像进行增强处理。5.根据权利要求1所述的方法，其特征在于，所述对增强处理后的所述图像序列进行编码传输，包括：对于同一目标，从所述增强处理后的图像序列中选取部分或全部图像帧进行编码传输。6.根据权利要求5所述的方法，其特征在于，所述从增强处理后的图像序列中选取部分图像帧进行编码传输，包括：从所述增强处理后的图像序列中选取质量评分最高的一帧图像进行编码传输。7.一种图像处理装置，其特征在于，应用于视频监控前端设备，所述装置包括：目标检测单元，用于对监控视频帧进行目标检测与跟踪...

【专利技术属性】
技术研发人员：蔡晓望，
申请(专利权)人：杭州海康威视数字技术股份有限公司，
类型：发明
国别省市：