一种智能座舱多模态人机交互驾驶员状态监测调节系统技术方案

本发明专利技术适用于智能座舱技术领域，提供了一种智能座舱多模态人机交互驾驶员状态监测调节系统，包括仪表显示屏和中控显示屏，还包括：智能方向盘，所述智能方向盘上设置有握力传感器，所述智能方向盘上还设置有驾驶员语音麦克风和方向盘显示屏；智能交互座椅，所述智能交互座椅包括座椅本体和智能功能系统，所述智能功能系统包括语音交互扬声器、心率传感器以及座椅集成模块；驾驶员监测摄像头，所述驾驶员监测摄像头的一侧设置有聊天机器人；以及力度传感器。该系统能够充分考虑各种影响行车安全的驾驶状态，在监测调节驾驶员驾驶状态的同时尽可能地提升用户体验，并最大限度优化其调节作用，保证行车安全。保证行车安全。保证行车安全。

【技术实现步骤摘要】
一种智能座舱多模态人机交互驾驶员状态监测调节系统


[0001]本专利技术属于智能座舱
，尤其涉及一种智能座舱多模态人机交互驾驶员状态监测调节系统。

技术介绍

[0002]现今，汽车是人们出行时不可或缺的交通工具，而驾驶员的情绪状况会直接影响行车安全。其中，不良的驾驶状态是导致交通事故发生的重大隐患之一。随着科学技术的快速发展，人们不断追求驾驶过程的智能化和驾驶过程中的舒适度，从消费者需求出发的智能座舱理念应运而生。
[0003]交通事故虽不可能完全避免，但对驾驶员的状态进行监测预警，将会在很大程度上降低事故的发生率。与此同时，自动驾驶技术正在逐渐走向成熟，越来越多的汽车企业尝试将自动驾驶技术应用于协助预防交通事故。
[0004]在现有方案中，可实现对驾驶员的各种负面驾驶状态（如疲劳状态、分神状态、不良情绪以及抽烟酒驾等行为）进行监测和预警，但大部分方案都只能针对一种驾驶状态进行监测和预警，未能实现“多种驾驶员状态的识别监测、完备的警示系统、良好的用户体验、紧急状况时车辆的应急措施”四者的统一。

技术实现思路

[0005]本专利技术实施例的目的在于提供一种智能座舱多模态人机交互驾驶员状态监测调节系统，旨在解决在现有方案中，对驾驶员的各种负面驾驶状态进行监测的设备未能实现“多种驾驶员状态的识别监测、完备的警示系统、良好的用户体验、紧急状况时车辆的应急措施”四者的统一的问题。
[0006]本专利技术实施例是这样实现的，一种智能座舱多模态人机交互驾驶员状态监测调节系统，包括仪表显示屏和中控显示屏，还包括：智能方向盘，所述智能方向盘上设置有握力传感器，且所述握力传感器沿智能方向盘呈360
°
圆周布置，所述智能方向盘内置加热模块和振动发生装置，所述智能方向盘上还设置有驾驶员语音麦克风和方向盘显示屏；智能交互座椅，所述智能交互座椅包括座椅本体和智能功能系统，所述智能功能系统包括语音交互扬声器、心率传感器以及座椅集成模块，所述语音交互扬声器安置于座椅头枕侧部，所述心率传感器安装于座椅上部的中央；安装于仪表显示屏上方的驾驶员监测摄像头，所述驾驶员监测摄像头用于识别、捕捉和提取驾驶员的面部特征并向智能座舱域控制器智能座舱域控制器传输图像信息，所述驾驶员监测摄像头的一侧设置有聊天机器人；以及安装于踏板上的力度传感器。
[0007]进一步的技术方案，所述方向盘显示屏安装于智能方向盘的中央，用于显示车辆行驶信息，所述驾驶员语音麦克风安装于方向盘显示屏上方，用于识别驾驶员的语音信息
并传递给智能座舱域控制器。
[0008]进一步的技术方案，还包括智能空调系统，所述智能空调系统内置有智能香氛系统。
[0009]进一步的技术方案，车辆的前挡风玻璃处还设置有抬头显示系统。
[0010]进一步的技术方案，所述座椅集成模块包括加热单元、通风单元、按摩单元以及振动单元，能够分别实现加热、通风、按摩、振动等功能。
[0011]进一步的技术方案，所述力度传感器安装于加速踏板和制动踏板的后侧。
[0012]进一步的技术方案，还包括车内氛围灯和媒体音响播放器，所述车内氛围灯的开闭由智能座舱域控制器控制，所述媒体音响播放器主要用于播放音乐以及导航提示等，由智能座舱域控制器控制。
[0013]本专利技术实施例提供的一种智能座舱多模态人机交互驾驶员状态监测调节系统，在工作过程中，智能座舱域控制器综合力学信号、图像信号以及音频信号等对驾驶员状态做出综合计算，判断驾驶员是否处于危险驾驶状态。能够充分考虑各种影响行车安全的驾驶状态，在监测调节驾驶员驾驶状态的同时尽可能地提升用户体验，并最大限度优化其调节作用，保证行车安全。
附图说明
[0014]图1为本专利技术实施例提供的一种智能座舱多模态人机交互驾驶员状态监测调节系统的正视图；图2为本专利技术实施例提供的一种智能座舱多模态人机交互驾驶员状态监测调节系统的侧视图；图3为本专利技术实施例提供的一种智能座舱多模态人机交互驾驶员状态监测调节系统中的疲劳状态下系统监测预警与交互调节工作过程示意图；图4为本专利技术实施例提供的一种智能座舱多模态人机交互驾驶员状态监测调节系统中的分神状态下系统监测预警与交互调节工作过程示意图；图5为本专利技术实施例提供的一种智能座舱多模态人机交互驾驶员状态监测调节系统中的愤怒状态下系统监测预警与交互调节工作过程示意图；图6为本专利技术实施例提供的一种智能座舱多模态人机交互驾驶员状态监测调节系统中的失落状态下系统监测预警与交互调节工作过程示意图；图7为本专利技术实施例提供的一种智能座舱多模态人机交互驾驶员状态监测调节系统中的酒驾状态下系统监测预警与交互调节工作过程示意图。
[0015]附图中：车内氛围灯1；媒体音响播放器2；握力传感器3；智能方向盘4；驾驶员监测摄像头5；驾驶员语音麦克风6；方向盘显示屏7；仪表显示屏8；聊天机器人9；中控显示屏10；智能空调系统11；智能交互座椅12；抬头显示系统13；语音交互扬声器14；心率传感器15；座椅集成模块16；力度传感器17；智能座舱域控制器18。
具体实施方式
[0016]为了使本专利技术的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本专利技术进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本专利技术，并
不用于限定本专利技术。
[0017]以下结合具体实施例对本专利技术的具体实现进行详细描述。
[0018]实施例1，如图1
‑
3所示，一种智能座舱多模态人机交互驾驶员状态监测调节系统，包括但不仅限于疲劳状态监测预警与交互调节系统。当车辆处于行驶状态时，通过驾驶员监测摄像头5和心率传感器15等实时监测驾驶员的状态，智能座舱域控制器18根据各单元信号判断驾驶员是否处于疲劳驾驶状态。当驾驶员处于安全驾驶状态时，后续系统不工作。当智能座舱域控制器18判定驾驶员处于疲劳状态时，多模态交互预警系统、调节系统启动工作。
[0019]驾驶员疲劳状态又分为重度疲劳和轻度疲劳状态。当系统判断驾驶员处于重度疲劳驾驶状态时，车辆自动开启双闪提示灯以提醒外部周围车辆及行人并转为辅助驾驶模式，通过方向盘显示屏7、仪表显示屏8、中控显示屏10、抬头显示系统13以及语音交互扬声器14等配合，在视觉和听觉方面提示驾驶员尽快靠边停车。当系统判断驾驶员处于轻度疲劳状态时，则通过智能座舱中的多模态人机交互方式对驾驶员进行状态调节：视觉调节方面，通过车内氛围灯1、抬头显示系统13及各显示屏等提醒驾驶员，并利用聊天机器人9的表情显示功能与语音交互调节相配合，刺激驾驶员视觉感官；听觉调节方面，媒体音响播放器2播放警示音，并通过驾驶员语音麦克风6和语音交互扬声器14等对驾驶员进行语音交互调节；触觉调节方面，通过智能方向盘4加热震动和智能交互座椅12的加热按摩等功能对驾驶员进行提醒以及调节；嗅觉调节方面，通过内置有智能香氛系统的智能空调系统11对车内气味进行调节，营造清爽提神的氛围以减轻驾驶员的疲劳程度。
[0020]一定时间后智能座舱域控制器18判本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种智能座舱多模态人机交互驾驶员状态监测调节系统，包括仪表显示屏和中控显示屏，其特征在于，还包括：智能方向盘，所述智能方向盘上设置有握力传感器，且所述握力传感器沿智能方向盘呈360
°
圆周布置，所述智能方向盘内置加热模块和振动发生装置，所述智能方向盘上还设置有驾驶员语音麦克风和方向盘显示屏；智能交互座椅，所述智能交互座椅包括座椅本体和智能功能系统，所述智能功能系统包括语音交互扬声器、心率传感器以及座椅集成模块，所述语音交互扬声器安置于座椅头枕侧部，所述心率传感器安装于座椅上部的中央；安装于仪表显示屏上方的驾驶员监测摄像头，所述驾驶员监测摄像头用于识别、捕捉和提取驾驶员的面部特征并向智能座舱域控制器传输图像信息，所述驾驶员监测摄像头的一侧设置有聊天机器人；以及安装于踏板上的力度传感器。2.根据权利要求1所述的智能座舱多模态人机交互驾驶员状态监测调节系统，其特征在于，所述方...

【专利技术属性】
技术研发人员：臧力卓，尚家卉，李庆森，孟蕴豪，张玉霞，刘沣锐，李皓，崔明亮，李琪蕊，
申请(专利权)人：吉林大学，
类型：发明
国别省市：