一种驾驶员手持电话行为检测方法及装置制造方法及图纸

本发明专利技术提供了一种驾驶员手持电话行为检测方法及装置，该方法包括：采集待检测驾驶员所在车辆图像；从采集的车辆图像中获取车辆的外接矩形区域图像；从上述外接矩形区域图像中定位所述待检测驾驶员的驾驶区域，得到驾驶区域图像；根据驾驶区域图像、预先训练的举手行为检测模型及预先训练的举手行为分类模型对待检测驾驶员进行手持电话行为检测。本发明专利技术中，通过待检测驾驶员的驾驶区域判断待检测驾驶员是否有手持电话行为，不依赖于检测待检测驾驶员的脸部位置，能够准确的检测出驾驶员是否有手持电话行为，避免了由于受到光照、分辨率的影响无法检测出脸部位置，进而无法检测驾驶员是否有手持电话行为的情况。

【技术实现步骤摘要】

本专利技术涉及图像处理及智能交通监控
，具体而言，涉及一种驾驶员手持电话行为检测方法及装置。
技术介绍
驾驶员在驾驶过程中，需要双手握住方向盘，并且集中注意力观察路况及周围环境，如果驾驶员在驾驶过程中有手持电话行为，这时驾驶员就会单手握方向盘，这会对驾驶员驾驶车辆形成较大障碍；并且，驾驶员在驾驶车辆时接打电话容易分散注意力，妨碍驾驶员对路况及周围环境的观察，降低对外围视觉的感知能力，危害驾驶员的行车安全，因此，对驾驶员行车过程中的手持电话行为进行检测和警报就显得尤为重要。相关技术中的驾驶员手持电话行为检测方法，大都是建立人脸检测的基础上，即检测驾驶员的脸部位置，根据驾驶员的脸部位置确定出手持电话在左右脸部的位置，通过特征检测的方法检测驾驶员是否有手持电话行为。但是相关技术中的方法，由于受到光照、分辨率的影响，可能无法从采集的驾驶员的图像中检测到驾驶员的人脸，从而导致无法检测到驾驶员是否有手持电话行为。
技术实现思路
有鉴于此，本专利技术实施例的目的在于提供一种驾驶员手持电话行为检测方法及装置，以解决现有技术中依赖于驾驶员的脸部位置来检测驾驶员是否有手持电话行为时，当受到光照、分辨率的影响时，可能无法从采集的驾驶员的图像中检测到驾驶员的脸部位置，从而导致无法检测到驾驶员是否有手持电话行为的问题。第一方面，本专利技术实施例提供了一种驾驶员手持电话行为检测方法，其中，所述方法包括：采集待检测驾驶员所在车辆图像；从采集的车辆图像中获取车辆的外接矩形区域图像；从所述外接矩形区域图像中定位所述待检测驾驶员的驾驶区域，得到驾驶区域图像；根据所述驾驶区域图像、预先训练的举手行为检测模型及预先训练的举手行为分类模型对所述待检测驾驶员进行手持电话行为检测。结合第一方面，本专利技术实施例提供了上述第一方面的第一种可能的实现方式，其中，所述从所述外接矩形区域图像中定位所述待检测驾驶员的驾驶区域，得到驾驶区域图像，包括：根据所述外接矩形区域图像，对所述车辆的车前窗进行粗定位，得到粗定位的车前窗区域图像；从所述粗定位的车前窗区域图像中，定位所述车前窗的上下边缘，得到确定上下边缘的车前窗区域图像；从所述确定上下边缘的车前窗区域图像中，定位所述车前窗的左右边缘，得到车前窗区域图像；将所述车前窗区域图像划分为左半区域和右半区域，将所述右半区域确定为所述待检测驾驶员的驾驶区域，得到所述驾驶区域图像。结合第一方面的第一种可能的实现方式，本专利技术实施例提供了上述第一方面的第二种可能的实现方式，其中，所述从所述粗定位的车前窗区域图像中，定位所述车前窗的上下边缘，包括：获取所述粗定位的车前窗区域图像的边缘强度的二值化图；将所述边缘强度的二值化图进行水平投影，得到水平边缘投影图；将所述水平边缘投影图中的投影点按照边缘响应强度进行排序；从排序后的投影点中，按照边缘响应强度从强到弱的顺序依次选取两个投影点，将所述两个投影点之间的距离与预设距离范围进行比对，将满足所述预设距离范围的两个投影点对应的边缘确定为所述车前窗的上下边缘。结合第一方面的第一种可能的实现方式，本专利技术实施例提供了上述第一方面的第三种可能的实现方式，其中，所述从所述确定上下边缘的车前窗区域图像中，定位所述车前窗的左右边缘，包括：按照预设比例将所述确定上下边缘的车前窗区域图像划分为左部区域图像和右部区域图像；计算所述左部区域图像中每个像素点的梯度方向角，根据所述梯度方向角获取所述左部区域图像的二值化图像；对所述二值化图像中的像素点进行垂直投影，得到垂直投影图；确定出所述垂直投影图中的投影峰值点，根据所述投影峰值点确定所述车前窗的左边缘；根据所述右部区域图像确定所述车前窗的右边缘。结合第一方面的第一种可能的实现方式，本专利技术实施例提供了上述第一方面的第四种可能的实现方式，其中，所述根据所述外接矩形区域图像，对所述车辆的车前窗进行粗定位，得到粗定位的车前窗区域图像，包括：将距离所述外接矩形区域图像的上边界下方第一预设距离的位置确定为粗定位的车前窗的下边缘；将距离所述外接矩形区域图像的上边界上方第二预设距离的位置确定为粗定位的车前窗的上边缘；将所述粗定位的车前窗的上边缘与所述粗定位的车前窗的下边缘之间的区域确定为粗定位的车前窗区域，得到粗定的车前窗区域图像。结合第一方面，本专利技术实施例提供了上述第一方面的第五种可能的实现方式，其中，所述根据所述驾驶区域图像、预先训练的举手行为检测模型及预先训练的举手行为分类模型对所述待检测驾驶员进行手持电话行为检测，包括：根据所述驾驶区域图像及所述举手行为检测模型对所述待检测驾驶员进行举手行为检测；当举手行为检测结果指示所述待检测驾驶员存在举手行为时，根据所述驾驶区域图像及所述举手行为分类模型对所述待检测驾驶员进行手持电话行为检测。结合第一方面的第五种可能的实现方式，本专利技术实施例提供了上述第一方面的第六种可能的实现方式，其中，所述根据所述驾驶区域图像及所述举手行为检测模型对所述待检测驾驶员进行举手行为检测，包括：对所述驾驶区域图像进行归一化处理，得到第一预设尺寸的驾驶区域图像；从所述第一预设尺寸的驾驶区域图像中提取所述待检测驾驶员手臂的第一聚合通道特征，所述第一聚合通道特征包括灰度特征、梯度幅值及六个梯度方向特征；通过所述举手行为检测模型及所述第一聚合通道特征计算所述待检测驾驶员手臂不同位置的得分，根据所述得分判断所述待检测驾驶员是否有举手行为。结合第一方面的第六种可能的实现方式，本专利技术实施例提供了上述第一方面的第七种可能的实现方式，其中，所述当举手行为检测结果指示所述待检测驾驶员存在举手行为时，根据所述驾驶区域图像及所述举手行为分类模型对所述待检测驾驶员进行手持电话行为检测，包括：根据举手行为检测结果，将得分最高的手臂位置确定为手持电话行为检测的位置；从所述驾驶区域图像中提取所述待检测驾驶员得分最高的手臂位置的第二聚合通道特征，所述第二聚合通道特征包括灰度特征、梯度幅值及12个梯度方向特征；分别通过预先训练的举手行为模型及所述第二聚合通道特征计算每个举手行为模型的得分，根据所述每个举手行为模型的得分判断所述待检测驾驶员是否有手持电话行为。第二方面，本专利技术实施例提供了一种驾驶员手持电话行为检测装置，其中，所述装置包括：采集模块，用于采集待检测驾驶员所在车辆图像；获取模块，用于从采集的车辆图像中获取车辆的外接矩形区域图像；定位模块，用于从所述外接矩形区域图像中定位所述待检测驾驶员的驾驶区域，得到驾驶区域图像；手持电话行为检测模块，用于根据所述驾驶区域图像、预先训练的举手行为检测模型及预先训练的举手行为分类模型对所述待检测驾驶员进行手持电话行为检测。结合第二方面，本专利技术实施例提供了上述第二方面的第一种可能的实现方式，其中，所述定位模块包括：第一定位单元，用于根据所述外接矩形区域图像，对所述车辆的车前窗进行粗定位，得到粗定位的车前窗区域图像；第二定位单元，用于从所述粗定位的车前窗区域图像中，定位所述车前窗的上下边缘，得到确定上下边缘的车前窗区域图像；第三定位单元，用于从所述确定上下边缘的车前窗区域图像中，定位所述车前窗的左右边缘，得到车前窗区域图像；确定单元，用于将所述车前窗区域图像划分为左半区域和右半区域，将所述右半区域确定为所述待检测驾驶员的驾驶区域，得到所述驾驶区本文档来自技高网...

【技术保护点】
一种驾驶员手持电话行为检测方法，其特征在于，所述方法包括：采集待检测驾驶员所在车辆图像；从采集的车辆图像中获取车辆的外接矩形区域图像；从所述外接矩形区域图像中定位所述待检测驾驶员的驾驶区域，得到驾驶区域图像；根据所述驾驶区域图像、预先训练的举手行为检测模型及预先训练的举手行为分类模型对所述待检测驾驶员进行手持电话行为检测。

【技术特征摘要】
1.一种驾驶员手持电话行为检测方法，其特征在于，所述方法包括：采集待检测驾驶员所在车辆图像；从采集的车辆图像中获取车辆的外接矩形区域图像；从所述外接矩形区域图像中定位所述待检测驾驶员的驾驶区域，得到驾驶区域图像；根据所述驾驶区域图像、预先训练的举手行为检测模型及预先训练的举手行为分类模型对所述待检测驾驶员进行手持电话行为检测。2.根据权利要求1所述的方法，其特征在于，所述从所述外接矩形区域图像中定位所述待检测驾驶员的驾驶区域，得到驾驶区域图像，包括：根据所述外接矩形区域图像，对所述车辆的车前窗进行粗定位，得到粗定位的车前窗区域图像；从所述粗定位的车前窗区域图像中，定位所述车前窗的上下边缘，得到确定上下边缘的车前窗区域图像；从所述确定上下边缘的车前窗区域图像中，定位所述车前窗的左右边缘，得到车前窗区域图像；将所述车前窗区域图像划分为左半区域和右半区域，将所述右半区域确定为所述待检测驾驶员的驾驶区域，得到所述驾驶区域图像。3.根据权利要求2所述的方法，其特征在于，所述从所述粗定位的车前窗区域图像中，定位所述车前窗的上下边缘，包括：获取所述粗定位的车前窗区域图像的边缘强度的二值化图；将所述边缘强度的二值化图进行水平投影，得到水平边缘投影图；将所述水平边缘投影图中的投影点按照边缘响应强度进行排序；从排序后的投影点中，按照边缘响应强度从强到弱的顺序依次选取两个投影点，将所述两个投影点之间的距离与预设距离范围进行比对，将满足所述预设距离范围的两个投影点对应的边缘确定为所述车前窗的上下边缘。4.根据权利要求2所述的方法，其特征在于，所述从所述确定上下边缘的车前窗区域图像中，定位所述车前窗的左右边缘，包括：按照预设比例将所述确定上下边缘的车前窗区域图像划分为左部区域图像和右部区域图像；计算所述左部区域图像中每个像素点的梯度方向角，根据所述梯度方向角获取所述左部区域图像的二值化图像；对所述二值化图像中的像素点进行垂直投影，得到垂直投影图；确定出所述垂直投影图中的投影峰值点，根据所述投影峰值点确定所述车前窗的左边缘；根据所述右部区域图像确定所述车前窗的右边缘。5.根据权利要求2所述的方法，其特征在于，所述根据所述外接矩形区域图像，对所述车辆的车前窗进行粗定位，得到粗定位的车前窗区域图像，包括：将距离所述外接矩形区域图像的上边界下方第一预设距离的位置确定为粗定位的车前窗的下边缘；将距离所述外接矩形区域图像的上边界上方第二预设距离的位置确定为粗定位的车前窗的上边缘；将所述粗定位的车前窗的上边缘与所述粗定位的车前窗的下边缘之间的区域确定为粗定位的车前窗区域，得到粗定的车前窗区域图像。6.根据权利要求1所述的方法，其特征在于，所述根据所述驾驶区域图像、预先训练的举手行为检测模型及预先训练的举手行为分类模型对所述待检测驾驶员进行手持电话行为检测，包括：根据所述驾驶区域图像及所述举手行为检测模型对所述待检测驾驶员进行举手行为检测；当举手行为检测结果指示所述待检测驾驶员存在举手行为时，根据所述驾驶区域图像及所述举手行为分类模型对所述待检测驾驶员进行手持电话行为检测。7.根据权利要求6所述的方法，其特征在于，所述根据所述驾驶区域图像及所述举手行为检测模型对所述待检测驾驶员进行举手行为检测，包括：对所述驾驶区域图像进行归一化处理，得到第一预设尺寸的驾驶区域图像；从所述第一预设尺寸的驾驶区域图像中提取所述待检测驾驶员手臂的第一聚合通道特征，所述第一聚合通道特征包括灰度特征、梯度幅值及六个梯度方向特征；通过所述举手行为检测模型及所述第一聚合通道特征计算所述待检测驾驶员手臂不同位置的得分，根据所述得分判断所述待检测驾驶员是否有举手行为。8.根据权利要求7所述的方法，其特征在于，所述当举手行为检测结果指示所述待检测驾驶员存在举手行为时，根据所述驾驶区域图像及所述举手行为分类模型对所述待检测驾驶员进行手持电话行为检测，包括：根据举手行为检测结果，将得分最高的手臂位置确定为手持电话行为检测的位置；从所述驾驶区域图像中提取所述待检测驾驶员得分最高的手臂位置的第二聚合通道特征，所述第二聚合通道特征包括灰度特征、梯度幅值及12个梯度方向特征...

【专利技术属性】
技术研发人员：田波，许健，路洪运，万定锐，
申请(专利权)人：东方网力科技股份有限公司，
类型：发明
国别省市：北京;11