人物判定装置制造方法及图纸

在时间上远离的帧间或由不同的摄像机拍摄到的帧间也能够进行同一判定的人物判定装置判定不同的图像序列中包含的人物是否是同一人物，包括：步行姿态检测部（２００），检测表示图像序列中包含的第１及第２人物的步行状态的图像序列即第１及第２步行序列；步行状态推定部（１８０），由上述第１人物的步行序列来推定与该步行序列不同的时刻或位置上的第１人物的周期性的步行运动中的步行姿态的迁移状态；以及判定部（１９０），判定推定出的上述第１人物的步行状态的迁移状态、和上述第２人物的步行状态的迁移状态之间的匹配性，在具有匹配性的情况下，判定为上述第１人物和上述第２人物是同一人物。

【技术实现步骤摘要】

本专利技术涉及一种人物判定装置，判定不同的图像序列中包含的人物是 否是同一人物。
技术介绍
为了从监视摄像机等得到的图像序列中搜索和跟踪特定的人物，需要 鉴别人物，即判定不同的图像或图像序列中显现的人物是否是同一人物。以往，作为以搜索和跟踪图像序列中的人为目的的同一人物判定方法， 有在相邻帧间使接近的人物区域相对应的方法(例如参照专利文献1)。图1A 图1C是专利文献1中记载的人搜索和跟踪方法的说明图。图 1A及图1B表示拍摄同一人物所得的时间上连续的帧图像。图1A所示的 帧图像A10示出显现了向右移动的人All的图像。矩形A12是包含用运动矢量检测为人体中运动小的区域(人物稳定区域)的头部及胴体部分的外接 矩形。在图1B所示的帧图像A20中，也同样用虚线示出了从人A21中检 测出的人物稳定区域的外接矩形A22。在图1C所示的帧图像A30上，重 叠地同时显示了从帧图像A10及A20中得到的人物稳定区域的外接矩形 A12及A22。在该现有的方法中，如帧图像A30所示，根据外接矩形A12 和外接矩形A22之间的重叠、及两者的运动矢量的连续性，将人A11和人 A21作为同一人物来相对应，进行搜索和跟踪。专利文献l:(日本)特开2003-346159号公报(第3及第6页、图2及图9)然而，在上述现有的方法中，有下述问题由于在帧间从接近的位置 搜索人，所以在某个帧中一旦人物检测失败，则失败了的帧之前的帧的人物和之后的帧的人物之间不能相对应，不能跟踪人。此外，在同样的方法中，有下述问题虽然也可以用人区域的颜色或 图像图案将不同的帧间的人相对应，但是在远离的帧间，由于人的移动造 成的位置的变化很大，或即使是同一人物，但是相对于摄像机的方向和姿 态和照明条件变化，而难以相对应。因此，在图像内显现了多个人的情况下，如果产生想搜索和跟踪的人 暂时进入其他人或物的背后、或者由于照明变化等的影响而暂时不能正常 地检测人的帧，则有不能继续进行搜索和跟踪这一问题。
技术实现思路
因此，本专利技术就是用于解决上述现有的课题，其目的在于提供一种人 物判定装置，即使在时间上远离的帧间或用不同的摄像机拍摄到的帧间， 也能够判定是否是同一人物。为了实现上述目的，本专利技术的人物判定装置判定不同的图像序列中包 含的人物是否是同一人物，其特征在于，包括图像序列输入单元，接受 第1图像序列及与上述第1图像序列不同的时刻或不同的图像传感器取得 的第2图像序列的输入；步行序列提取单元，从输入的上述第1及第2图 像序列中，分别提取表示人物的步行状态的图像序列即第1及第2步行序 列；步行信息提取单元，从提取出的上述第1及第2步行序列中，分别提 取表示人物的时间上或空间上的步行周期的信息即第1及第2时空间周期信息和人物的周期性的步行动作的时间上或空间上的相位信息即第1及第2时空间相位信息，作为确定人物的步行的周期性的运动的信息即第1及第 2步行信息；步行信息对照单元，对照提取出的上述第1及第2步行信息；以及判定单元，根据上述步行信息对照单元的对照结果，来判定上述第1及第2图像序列中包含的人物是否是同一人物；校正信息存储单元，预先 存储表示上述第1及第2图像序列各自的图像上的位置和在拍摄场所中的 位置之间的对应关系的校正信息；和校正单元，根据上述校正信息存储单 元中存储的校正信息，来进行上述步行信息提取单元提取上述第1及第2 步行信息时的时空间上的校正处理。专利技术效果根据本专利技术，通过利用从人的步行中得到的时空间周期信息、时空间 相位信息及时空间位置信息，能够将远离的帧间或不同的传感器得到的人 物图像序列相对应。艮P，实现了一种人物判定装置，即使在时间上远离的帧间或用不同的 摄像机拍摄到的帧间，也能够判定是否是同一人物。附图说明图1A是现有的人物搜索跟踪装置的检测矩形的一例的图。 图1B是现有的人物搜索跟踪装置的检测矩形的一例的图。 图1C是现有的人物搜索跟踪装置的检测矩形的移动的图。 图2是本专利技术实施方式1的人物判定装置的结构的功能框图。 图3是本专利技术实施方式1的图像序列的一例的图。 图4A是人的下半身图像的序列的一例的图。 图4B是本专利技术实施方式1的步行序列的一例的图。 图4C是步行序列的最小图案的形状的一例的图。 图5是本专利技术实施方式1的时空间相位信息及时空间位置信息的图。 图6A是本专利技术实施方式1的步行轨迹的一例的图。 图6B是本专利技术实施方式1的推定步行状态的一例的图。 图6C是本专利技术实施方式1的相位状态不同的步行状态的一例的图。 图7A是本专利技术实施方式1的步行轨迹和脚间的变化之间的关系的一例 的图。图7B是本专利技术实施方式1的脚间变化的一例的图。 图7C是本专利技术实施方式1的脚间变化的一例的图。 图8A是本专利技术实施方式1的步行序列的显示的一例的图。 图8B是本专利技术实施方式1的步行序列的显示的一例的图。 图8C是本专利技术实施方式1的步行序列的显示的一例的图。 图9是本专利技术实施方式1的进行了步行序列的搜索和跟踪的结果的存 储格式的示例图。图IO是本专利技术实施方式1的人物搜索跟踪装置的结构的框图。图11是本专利技术实施方式1的指示搜索和跟踪的画面的示例图。图12是本专利技术实施方式1的对照步骤的一例的流程图。 图13A是本专利技术实施方式1的图像序列1的一例的图。 图13B是本专利技术实施方式1的图像序列2的一例的图。 图14是本专利技术实施方式1的步行序列提取步骤的一例的流程图。 图15是本专利技术实施方式1的时空间周期信息和时空间相位信息和时空 间位置信息的提取步骤的一例的流程图。图16A是本专利技术实施方式1的特定步行状态的检测的一例的图。图16B是本专利技术实施方式1的特定步行状态的检测模板的一例的图。图16C是本专利技术实施方式1的特定步行状态的检测过程的一例的图。图17是本专利技术实施方式1的控制部进行的显示的一例的图。图18A是本专利技术实施方式2的图像序列1的一例的图。图18B是本专利技术实施方式2的图像序列2的一例的图。图19是本专利技术实施方式2的人物判定装置的结构的功能框图。具体实施方式本专利技术实施方式的人物判定装置判定不同的图像序列中包含的人物是 否是同一人物，其特征在于，包括图像序列输入单元，接受第1图像序 列、及与上述第1图像序列不同的时刻或不同的图像传感器取得的第2图 像序列的输入；步行序列提取单元，从输入的上述第1及第2图像序列中， 分别提取表示人物的步行状态的图像序列即第1及第2步行序列；步行信 息提取单元，从提取出的上述第1及第2步行序列中，分别提取确定人物 的步行的周期性的运动的信息即第1及第2步行信息；步行信息对照单元， 对照提取出的上述第1及第2步行信息；以及判定单元，根据上述步行信 息对照单元的对照结果，来判定上述第1及第2图像序列中包含的人物是 否是同一人物。这里，作为步行信息，例如可以是表示人物的时间上或空 间上的步行周期的信息，或者是人物的周期性的步行动作的时间上或空间 上的相位信息，或者是表示人物的周期性的步行动作的时间上或空间上的 位置信息。由此，着眼于人物的步行来判定是否是同一人物，所以与在帧间将接近的位置上的人物判定为同一人物、或者用颜色或图像图案来判定是否是 同一人物的现有技术相比，即使想搜索和跟踪的人暂时进入其他人或物的 背后、或者由于照明变化等的影响而暂本文档来自技高网...

【技术保护点】
一种人物判定装置，判定不同的图像序列中包含的人物是否是同一人物，其特征在于，包括：　图像序列输入单元，接受第１图像序列及与上述第１图像序列不同的时刻或不同的图像传感器取得的第２图像序列的输入；　步行序列提取单元，从输入的上述第１及第２图像序列中，分别提取表示人物的步行状态的图像序列即第１及第２步行序列；　步行信息提取单元，从提取出的上述第１及第２步行序列中，分别提取表示人物的时间上或空间上的步行周期的信息即第１及第２时空间周期信息和人物的周期性的步行动作的时间上或空间上的相位信息即第１及第２时空间相位信息，作为确定人物的步行的周期性的运动的信息即第１及第２步行信息；　步行信息对照单元，对照提取出的上述第１及第２步行信息；以及　判定单元，根据上述步行信息对照单元的对照结果，来判定上述第１及第２图像序列中包含的人物是否是同一人物；　校正信息存储单元，预先存储表示上述第１及第２图像序列各自的图像上的位置和在拍摄场所中的位置之间的对应关系的校正信息；和　校正单元，根据上述校正信息存储单元中存储的校正信息，来进行上述步行信息提取单元提取上述第１及第２步行信息时的时空间上的校正处理。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：今川太郎，岩崎正宏，
申请(专利权)人：松下电器产业株式会社，
类型：发明
国别省市：JP[日本]