图像处理装置和图像处理方法制造方法及图纸

本发明专利技术公开了一种图像处理装置和图像处理方法。所述图像处理装置包括接收部、图像提取部、形成部以及比较部。接收部接收视频。图像提取部从构成由所述接收部接收的所述视频的多个帧中提取目标对象图像。形成部使在由所述图像提取部提取的所述目标对象图像中的多个目标对象图像形成为一个单位，所述多个目标对象图像在时间上彼此分离。比较部基于由所述形成部形成的所述单位进行比较。

【技术实现步骤摘要】
图像处理装置和图像处理方法
本专利技术涉及一种图像处理装置和图像处理方法。
技术介绍
R.Girshick、FastR-CNN、arXiv:1504.08083,2015(以下称作NPL1)公开了一种快速的基于区域的卷积网络(FastR-CNN)方法，在该方法中，目标图像(例如人的图像)从输入图像上切下并且通过使用神经网络(卷积神经网络)针对切下的目标图像来识别人。A.Krizhevsky、I.Sutskever、G.E.Hinton、ImageNetClassificationwithDeepConvolutionalNeuralNetworks,NIPS2012(以下称作NPL2)描述了使用卷积神经网络的图像识别。在该文献中描述的卷积神经网络被称作AlexNet，其以其中一个作者来命名。H.Liu、J.Feng、M.Qi、J.Jiang和S.Yan,End-to-EndComparativeAttentionNetworksforPersonRe-identification,IEEETransactionsonImageProcessing,vol.14,No.8,June2016(以下称作NPL3)探讨了从人物图像(例如为通过使用多个照相机捕获的行人的图像)上再次识别同一人物的人物再识别问题，并且描述了如下技术，在该技术中导入了三元组损失(tripletloss)以利用距离来表示人的身份，此外，导入了自动学习应当注意图像的哪个位置的视觉注意模型从而改善识别精度。L.Wu、C.Shen、A.vandenHengel、PersonNet:PersonRe-identificationwithDeepConvolutionalNeuralNetworks,http://arxiv.org/abs/1601.07255(以下称作NPL4)探讨了与NPL3类似的问题并且描述了如下技术，在该技术中使用了具有更小内核以及更多层次的深层神经网络从而改善识别同一个人的性能。F.Schroff、D.Kalenichenko、J.Philbin、FaceNet:AUnifiedEmbeddingforFaceRecognitionandClustering,CVPR2012,pp.815-823(以下称作NPL5)描述了OpenFace，其是用于计算分别出现在两个输入帧中的面部之间的距离的标准方法。日本专利文献特开2004-192378号公开了一种面部图像处理装置，其包括：面部区域检测单元，其从通过使用多个图像捕获单元捕获的多个图像中检测人的面部特征点以检测面部区域；面部特征值提取单元，其从由面部区域检测单元检测的面部区域图像中提取面部特征值；人物识别单元，其从预先登记的特定人物的面部特征值以及通过面部特征值提取单元提取的面部特征值来计算相似度从而进行人物识别；以及输出装置，其输出通过人识别单元进行的识别结果。日本专利文献特开平7-73298号公开了一种人物识别装置，其包括：从通过捕获主体的图像获得的图像数据区域中检测移动对象数据区域的单元；从检测的移动对象数据区域中提取其中面部应当存在的数据区域的单元；确定是否具有被识别的面部的图像数据包括在提取的面部数据区域中的单元；以及当确定了不包括其中被识别的面部的图像数据时使得输出发生的单元。日本专利文献特开2006-236216号公开了用于识别包括在多个图像中的每一个中的人的人物识别系统，其包括：人物识别单元，其识别包括在多个图像中的每一个中的多个人物；亲密度计算单元，其基于由人物识别单元进行的识别的结果，计算包括在多个图像中的至少一些图像中的人物之间的亲密度；判断单元，其判断在一个人和由人物识别单元作为不同的人物识别的多个人物中的每一个人物之间的亲密度之差是否等于或小于预定基准值；以及校正单元，其在判断一个人和作为不同的人物识别的多个人物中的每一个人物之间的亲密度之差等于或小于预定基准值的情况下，判定该多个人物为同一个人并且校正人物识别单元的识别结果。
技术实现思路
本专利技术的目的在于提供一种图像处理装置和图像处理方法，与对构成视频的帧进行处理的情况相比本专利技术的装置和方法能够更为准确地对目标对象之间进行比较。根据本专利技术的第一方面，提供一种图像处理装置，其包括接收部、图像提取部、形成部以及比较部。接收部接收视频。图像提取部从构成由所述接收部接收的所述视频的多个帧中提取目标对象图像。形成部使在由所述图像提取部提取的所述目标对象图像中的多个目标对象图像形成为一个单位，所述多个目标对象图像在时间上彼此分离。比较部基于由所述形成部形成的所述单位进行比较。根据本专利技术的第二方面，在图像处理装置中，所述比较部与预先登记的目标对象图像进行比较。根据本专利技术的第三方面，在图像处理装置中，所述比较部与构成另一个单位的目标对象图像进行比较。根据本专利技术的第四方面，在图像处理装置中，在多个目标对象重叠的情况下，所述形成部从所述单位排除重叠的目标对象的目标对象图像。根据本专利技术的第五方面，在图像处理装置中，所述形成部使多个目标对象重叠之前的目标对象图像形成为所述单位。根据本专利技术的第六方面，在图像处理装置中，所述图像提取部提取人物作为目标对象。根据本专利技术的第七方面，在图像处理装置中，所述图像提取部进行面部识别。根据本专利技术的第八方面，提供一种图像处理方法，其包括以下步骤：接收视频；从构成所接收的视频的多个帧中提取目标对象图像；使在所提取的目标对象图像中的多个目标对象图像形成为一个单位，所述多个目标对象图像在时间上彼此分离；并且基于所形成的单位进行比较。根据本专利技术的第一方面，能够提供一种图像处理装置，其与对构成视频的帧进行处理的情况相比能够更为准确地对目标对象之间进行比较。根据本专利技术的第二方面，除了由本专利技术的第一方面实现的效果之外，还能够识别目标对象。根据本专利技术的第三方面，除了由本专利技术的第一方面实现的效果之外，还能够确定目标对象之间的距离。根据本专利技术的第四方面或第五方面，除了由本专利技术的第一方面至第三方面中的任一项实现的效果之外，还能够应对多个目标对象重叠的情况。根据本专利技术的第六方面，除了由本专利技术的第一方面至第四方面中的任一项实现的效果之外，还能够对来自接收的视频上的人进行比较。根据本专利技术的第七方面，除了由本专利技术的第五方面实现的效果之外，还能够包括面部作为比较目标。根据本专利技术的第八方面，能够提供一种图像处理方法，其与对构成视频的帧进行处理的情况相比能够更为准确地对目标对象之间进行比较。附图说明将基于下列附图详细说明本专利技术的示例性实施例，其中：图1是示出根据本专利技术的示例性实施例的图像处理装置的硬件结构的框图；图2是示出由根据本专利技术的示例性实施例的图像处理装置实施的功能的功能框图；图3是用于描述在根据本专利技术的示例性实施例的图像处理装置中提取时间线片段(timelinesegment)的图；图4是用于描述在根据本专利技术的示例性实施例的图像处理装置中的各帧中的人物区域之间的重叠的图；图5是用于描述在根据本专利技术的示例性实施例的图像处理装置中发生多人重叠的图；图6是示出本专利技术的第一示例性实施例的概要的图；图7是示出在本专利技术的第一示例性实施例中的时间线片段比较单元的详细的框图；图8是示出本专利技术的第一示例性实施例的总体控制本文档来自技高网...

【技术保护点】
一种图像处理装置，其特征在于，包括：接收部，其接收视频；图像提取部，其从构成由所述接收部接收的所述视频的多个帧中提取目标对象图像；形成部，其使在由所述图像提取部提取的所述目标对象图像中的多个目标对象图像形成为一个单位，所述多个目标对象图像在时间上彼此分离；以及比较部，其基于由所述形成部形成的所述单位进行比较。

【技术特征摘要】
2016.08.31 JP 2016-1696781.一种图像处理装置，其特征在于，包括：接收部，其接收视频；图像提取部，其从构成由所述接收部接收的所述视频的多个帧中提取目标对象图像；形成部，其使在由所述图像提取部提取的所述目标对象图像中的多个目标对象图像形成为一个单位，所述多个目标对象图像在时间上彼此分离；以及比较部，其基于由所述形成部形成的所述单位进行比较。2.根据权利要求1所述的图像处理装置，其中，所述比较部与预先登记的目标对象图像进行比较。3.根据权利要求1所述的图像处理装置，其中，所述比较部与构成另一个单位的目标对象图像进行比较。4.根据权利要求1至3中任一...

【专利技术属性】
技术研发人员：坪下幸宽，尾崎良太，重中亨介，福井基文，加藤典司，
申请(专利权)人：富士施乐株式会社，
类型：发明
国别省市：日本,JP