驾驶员监视装置、驾驶员监视方法以及驾驶员监视用计算机程序制造方法及图纸

本发明专利技术提供驾驶员监视装置、驾驶员监视方法以及驾驶员监视用计算机程序。驾驶员监视装置具有：姿势检测部(33)，从通过设置于车辆(10)的摄像部(3)生成的车辆(10)的车室内的图像检测车辆(10)的驾驶员的姿势；异常判定部(34)，在检测到的姿势满足异常判定条件的情况下，判定为驾驶员产生了异常；异常音检测部(31)，根据通过设置于车辆(10)的声音取得部(2)取得的、车辆(10)的车室内的声音信号，检测车辆(10)的驾驶员发出的异常音；以及条件设定部(32)，相比于未检测到异常音的情况下的异常判定条件，缓和检测到异常音的情况下的异常判定条件。定条件。定条件。

【技术实现步骤摘要】
驾驶员监视装置、驾驶员监视方法以及驾驶员监视用计算机程序


[0001]本专利技术涉及监视车辆的驾驶员的驾驶员监视装置、驾驶员监视方法以及驾驶员监视用计算机程序。

技术介绍

[0002]提出了监视车辆的驾驶员，判定驾驶员的状态是否为适合于车辆的驾驶的状态的技术(参照日本特开2020
‑
173836号公报)。
[0003]在日本特开2020
‑
173836号公报公开的技术中，具备进行自主行驶的自动驾驶模式的自动驾驶车辆检测基于驾驶者和/或乘车者的预定的疾病或者症状的健康状态的异变，确定检测到健康状态的异变的预定的疾病或者症状。而且，自动驾驶车辆将关于确定的疾病或者症状有专家的医院和/或有专门设备的医院决定为前往目的地，以自动驾驶模式移动到决定的前往目的地。该自动驾驶车辆将来自拍摄车内的1个以上的照相机的拍摄图像信息、来自对车内的声响或者声音进行收音的麦克风的声音信息、或者来自设置于自动驾驶车辆的1个以上的传感器的传感器信息的至少任意信息用于检测健康状态的异变。

技术实现思路

[0004]如将Society of Automotive Engineers(国际汽车工程师学会，SAE)的定义下的等级3的自动驾驶应用于车辆的情况那样，有时在预定的条件下针对驾驶员不要求参与驾驶而对车辆进行自动驾驶控制。在这样的状况下，容许驾驶员采取与适合于驾驶的姿势(以下有时简称为驾驶姿势)不同的姿势。在驾驶员采取与驾驶姿势不同的姿势的情况下，有时难以根据通过拍摄驾驶员得到的图像来判定驾驶员是否产生了某些异常。在这样的情况下，即使如上述以往技术那样为了判定驾驶员的状态而参照来自麦克风的声音信息，为了检测驾驶员产生的异常，需要解析在比较长的时间得到的映入驾驶员的图像。
[0005]因此，本专利技术的目的在于提供能够适当地检测驾驶员产生的异常的驾驶员监视装置。
[0006]根据一个实施方式，提供驾驶员监视装置。该驾驶员监视装置具有：姿势检测部，从通过设置于车辆的摄像部生成的车辆的车室内的图像检测车辆的驾驶员的姿势；异常判定部，在检测到的姿势满足异常判定条件的情况下，判定为驾驶员产生了异常；异常音检测部，根据通过设置于车辆的声音取得部取得的、车辆的车室内的声音信号，检测车辆的驾驶员发出的异常音；以及条件设定部，相比于未检测到异常音的情况下的异常判定条件，缓和检测到异常音的情况下的异常判定条件。
[0007]在该驾驶员监视装置中，优选姿势检测部将驾驶员的脸的位置以及驾驶员的脸的朝向的至少一方检测为驾驶员的姿势，异常判定条件是驾驶员的脸的朝向或者驾驶员的脸的位置脱离预定的正常范围的期间为预定的时间阈值以上，条件设定部使检测到异常音的情况下的正常范围窄于未检测到异常音的情况下的正常范围，或者使检测到异常音的情况
下的时间阈值短于未检测到异常音的情况下的时间阈值。
[0008]在该情况下，优选异常音检测部还判定基于驾驶员发出异常音时的驾驶员的状态的异常音的类别，条件设定部根据异常音的类别，设定检测到异常音的情况下的正常范围。
[0009]例如，优选条件设定部使检测到的异常音的类别是驾驶员的咳嗽的声响或者由于驾驶员的睡眠呼吸暂停综合征引起的鼾声的声响的情况下的、作为正常范围的驾驶员的脸的相对基准方向的下朝向的角度范围窄于未检测到异常音的情况下的下朝向的角度范围。
[0010]或者，优选条件设定部使检测到的异常音的类别是由于驾驶员的脑梗塞引起的鼾声的声响的情况下的、作为正常范围的驾驶员的脸的相对基准方向的左右方向的角度范围窄于未检测到异常音的情况下的左右方向的角度范围。
[0011]或者另外，优选条件设定部使检测到的异常音的类别是驾驶员的呜咽的声响的情况下的、作为正常范围的驾驶员的脸的相对基准方向的下朝向的角度范围窄于未检测到异常音的情况下的下朝向的角度范围，并且使检测到的异常音的类别是驾驶员的呜咽的声响的情况下的、作为正常范围的驾驶员的脸的位置的基准位置至下限位置的距离短于未检测到异常音的情况下的距离。
[0012]根据其他实施方式，提供驾驶员监视方法。该驾驶员监视方法包括：从通过设置于车辆的摄像部生成的车辆的车室内的图像检测车辆的驾驶员的姿势；在检测到的姿势满足异常判定条件的情况下，判定为驾驶员产生了异常；根据通过设置于车辆的声音取得部取得的、车辆的车室内的声音信号，检测车辆的驾驶员发出的异常音；以及相比于未检测到异常音的情况下的异常判定条件，缓和检测到异常音的情况下的异常判定条件。
[0013]根据进一步其他实施方式，提供驾驶员监视用计算机程序。该驾驶员监视用计算机程序包括用于使搭载于车辆的处理器执行如下步骤的命令：从通过设置于车辆的摄像部生成的车辆的车室内的图像检测车辆的驾驶员的姿势；在检测到的姿势满足异常判定条件的情况下，判定为驾驶员产生了异常；根据通过设置于车辆的声音取得部取得的、车辆的车室内的声音信号，检测车辆的驾驶员发出的异常音；以及相比于未检测到异常音的情况下的异常判定条件，缓和检测到异常音的情况下的异常判定条件。
[0014]本公开所涉及的驾驶员监视装置起到能够适当地检测驾驶员产生的异常这样的效果。
附图说明
[0015]图1是包括驾驶员监视装置的车辆控制系统的概略结构图。
[0016]图2是作为驾驶员监视装置的一个例子的ECU的硬件结构图。
[0017]图3是与驾驶员监视处理有关的ECU的处理器的功能框图。
[0018]图4A是示出未检测到驾驶员发出的异常音的情况下的驾驶员的异常判定的一个例子的图。
[0019]图4B是示出未检测到由驾驶员发出的异常音的情况下的驾驶员的异常判定的一个例子的图。
[0020]图5是由车辆的ECU的处理器执行的包括驾驶员监视处理的车辆控制处理的动作流程图。
具体实施方式
[0021]以下，参照附图，说明驾驶员监视装置以及由驾驶员监视装置执行的驾驶员监视方法以及驾驶员监视用计算机程序。该驾驶员监视装置在根据车室内的声音信号检测到驾驶员发出的异常音时，相比于未检测到异常音时，缓和基于从车室内的图像检测到的驾驶员的姿势的异常判定的条件。由此，该驾驶员监视装置抑制尽管驾驶员未产生异常，在驾驶员未采取适合于驾驶的姿势(以下有时简称为驾驶姿势)时误检测为驾驶员产生了异常。进而，该驾驶员监视装置在检测到驾驶员的异常音时缓和异常判定的条件，从而能够适当地检测驾驶员产生的异常。
[0022]图1是包括驾驶员监视装置的车辆控制系统的概略结构图。在本实施方式中，搭载于车辆10并且控制车辆10的车辆控制系统1具有麦克风2、驾驶员监视照相机3、通知设备4、以及作为驾驶员监视装置的一个例子的电子控制装置(ECU)5。麦克风2、驾驶员监视照相机3以及通知设备4和ECU5经由依照控制器局域网这样的通信标准的车内网络能够相互通信地连接。此外，车辆控制系统1也可以具有拍摄车辆10的周边的区域来生成表示该周边的区域的图像的车外照相机(未图示)。或者，车辆控制系统1本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种驾驶员监视装置，具有：姿势检测部，从通过设置于车辆的摄像部生成的所述车辆的车室内的图像检测所述车辆的驾驶员的姿势；异常判定部，在检测到的所述驾驶员的姿势满足异常判定条件的情况下，判定为所述驾驶员产生了异常；异常音检测部，根据通过设置于所述车辆的声音取得部取得的、所述车辆的车室内的声音信号，检测所述车辆的驾驶员发出的异常音；以及条件设定部，相比于未检测到所述异常音的情况下的异常判定条件，缓和检测到所述异常音的情况下的所述异常判定条件。2.根据权利要求1所述的驾驶员监视装置，其中，所述姿势检测部将所述驾驶员的脸的位置以及所述驾驶员的脸的朝向的至少一方检测为所述驾驶员的姿势，所述异常判定条件是所述驾驶员的脸的朝向或者所述驾驶员的脸的位置脱离预定的正常范围的期间为预定的时间阈值以上，所述条件设定部使检测到所述异常音的情况下的所述正常范围窄于未检测到所述异常音的情况下的所述正常范围，或者使检测到所述异常音的情况下的所述时间阈值短于未检测到所述异常音的情况下的所述时间阈值。3.根据权利要求2所述的驾驶员监视装置，其中，所述异常音检测部还判定基于所述驾驶员发出异常音时的所述驾驶员的状态的所述异常音的类别，所述条件设定部根据所述异常音的类别，设定检测到所述异常音的情况下的所述正常范围。4.根据权利要求3所述的驾驶员监视装置，其中，所述条件设定部使检测到的所述异常音的类别是所述驾驶员的咳嗽的声响或者由于所述驾驶员的睡眠呼吸暂停综合征引起的鼾声的声响的情况下的、作为所述正常范围的所述驾驶员的脸的相对基准方向的下朝向的角度范围窄于未检测到所述异常音的情况下的所述下朝向的角度范围。5.根据权利要求3所述的驾驶员监视装置，其中，所述条件设定部使检测到...

【专利技术属性】
技术研发人员：原健一郎，
申请(专利权)人：丰田自动车株式会社，
类型：发明
国别省市：