一种车载眼神交互装置,包括车载显示屏、眼球追踪定位系统以及眼球追踪处理器,所述眼球追踪定位系统包括用于捕捉眼球相应的位置的红外摄像头,红外摄像头与眼球追踪处理器相连,眼球追踪处理器包括图像采集模块、图像识别模块、图像处理模块和屏幕控制模块,图像处理模块包括身份识别系统和眼控操作系统;本发明专利技术在工作时,通过眼球追踪定位系统提取驾驶员的眼部特征,然后将信息传输给眼球追踪处理器,眼球追踪处理器对信息进行处理后发出屏幕控制指令给车载显示屏,车载显示屏得到指令后进行相应动作。本发明专利技术通过眼球追踪技术,使驾驶员可以通过眼神控制车载显示屏的翻页和音量调节,并且可以识别驾驶员的身份用以启动个性化设置。
【技术实现步骤摘要】
一种车载眼神交互装置
本专利技术涉及汽车
,特别涉及一种车载眼神交互装置。
技术介绍
中控屏幕作为显示信息、人车交互的关键部分,越来越多的应用多模交互技术,给汽车用户带来更多的自然感、亲切感及便利性的体验。然而,当前主流的交互方式在下述问题:1)语音指令识别不准确。语音识别,即将人类语音转化为计算机可读的字符序列。这项技术还有待完善,背景声、识别语言的常见度、用户的语速和普通话水平都会对语音识别产生很大的干扰,目前语音行业最高的准确率达到了95%,而且语音识别领域目前还未形成统一的行业标准;2)手指触控操作时,盲操作困难,按压反应时间滞后以及手感很难把握;3)手势操作时,右手离开方向盘,影响驾驶安全。因而对于车主而言,目前的人车交互方式不能带来极致的自然感和亲切感。眼球追踪技术是一项科学应用技术,当人的眼睛看向不同方向时,眼部会有细微的变化,这些变化会产生可以提取的特征,计算机可以通过图像捕捉或扫描提取这些特征,从而实时追踪眼睛的变化,预测用户的状态和需求,并进行响应,达到用眼睛控制设备的目的。而将眼球追踪技术应用到汽车领域用以控制车载显示屏的操作,设计一种车载眼神交互装置,进而使驾驶员在驾驶过程中能够方便的操作,成为目前亟待解决的技术问题。
技术实现思路
本专利技术提供一种车载眼神交互装置,本专利技术解决了现有技术中存在的问题,通过眼球追踪技术,使驾驶员可以通过眼神控制车载显示屏的翻页和音量调节,并且可以识别驾驶员的身份用以启动个性化设置,该技术适于推广使用。一种车载眼神交互装置,包括车载显示屏、眼球追踪定位系统以及眼球追踪处理器,所述眼球追踪定位系统包括用于捕捉眼球相应的位置的红外摄像头,红外摄像头与眼球追踪处理器相连,眼球追踪处理器包括图像采集模块、图像识别模块、图像处理模块和屏幕控制模块,图像处理模块包括身份识别系统和眼控操作系统;车载眼神交互装置在工作时,通过眼球追踪定位系统提取驾驶员的眼部特征,然后将信息传输给眼球追踪处理器,眼球追踪处理器对信息进行处理后发出屏幕控制指令给车载显示屏,车载显示屏得到指令后进行相应动作。眼球追踪处理器的图像采集模块接收眼球追踪定位系统传输的信息,图像识别模块对眼球追踪定位系统传输的信息进行识别,将图片转换成系统可以理解的信息,图像处理模块对信息进行处理,理解此时驾驶员的意图,屏幕控制模块根据驾驶员的意图发出屏幕控制指令。图像处理模块的身份识别系统识别出车主身份,眼控操作系统理解车主想要进行的操作,进而由屏幕控制模块发出控制指令。使用者凝视显车载显示屏中的四个点进行校准,校准后视线焦点所在的中间点会变红。将这四个点的坐标提取出来进行分析,生成一套坐标系,车载显示屏上方点为(0,1),车载显示屏下方点为(0,-1),车载显示屏左方点为(-1,0),车载显示屏右方点为(1,0)。当使用者凝视车载显示屏上方点时为增大音量指令,下方点为减小音量指令,左为向左翻页,右为向右翻页。所述的图像采集模块的型号为TMS320DM642,图像识别模块的型号为ShuffleNet,图像处理模块的型号为Hi3559AV100,屏幕控制模块的型号为ADS7843。本专利技术的工作原理如下:用眼球追踪处理器的身份识别系统对收集的驾驶员信息进行虹膜识别,验证驾驶员身份,然后发出指令将车辆设置为次驾驶员的预设状态。用眼球追踪定位系统能让使用者通过凝视车载显示屏不同的位置达到左右翻页、调节音量的目的。眼球追踪定位系统通过红外摄像头捕捉到眼球相应的位置,以两瞳孔中心连线的中点为0点建立笛卡尔坐标系,得到两个瞳孔位置的坐标值,将瞳孔位置的坐标值不断的输出至眼球追踪处理器,眼球追踪处理器对集的信号运用算法处理并转化为控制指令,并将指令传达给屏幕控制模块。例如,驾驶员凝视车载显示屏左方位置,则向左翻页,若凝视屏幕的上方或下方,则系统音量相应增大或减小。眼球追踪定位系统为传感器与红外照明系统(摄像头)相结合,根据新的跟踪算法、高分辨率的传感器,确保我们能跟踪微小的动作,同时保持了高精度的定位范围,并优化了大多数环境和光照条件。在使用前只需对屏幕进行校准设置,以确定使用者与摄像头的距离以及转动范围即可使用。本专利技术的有益效果:1、身份识别:虹膜识别相比其它身份识别更精准,误识别率仅为百万分之一,在眼神交互系统中用来进行解锁、启动驾驶系统,以及识别驾驶员身份,私密个性化应用和设置,如常用导航路线、个人喜好音乐等。2、眼控操作:驾驶员在驾驶过程中,通过注视显示屏的特定位置,即可实现左右翻页、调节音量大小等功能,由此解放驾驶员的双手,保证驾驶安全。附图说明图1为本专利技术的结构示意图,图2为本专利技术的眼球追踪处理组成示意图。图3为本专利技术的图像处理模块组成示意图。图4为本专利技术的车载显示屏示意图。具体实施方式如图1、图2、图3和图4所示,一种车载眼神交互装置,包括车载显示屏1、眼球追踪定位系统2以及眼球追踪处理器3,所述眼球追踪定位系统2包括用于捕捉眼球相应的位置的红外摄像头,红外摄像头与眼球追踪处理器3相连,眼球追踪处理器3包括图像采集模块31、图像识别模块32、图像处理模块33和屏幕控制模块34,图像处理模块33包括身份识别系统331和眼控操作系统332;车载眼神交互装置在工作时,通过眼球追踪定位系统2提取驾驶员的眼部4特征,然后将信息传输给眼球追踪处理器3,眼球追踪处理器3对信息进行处理后发出屏幕控制指令给车载显示屏1,车载显示屏1得到指令后进行相应动作。如图2所示,眼球追踪处理器3的图像采集模块31接收眼球追踪定位系统2传输的信息,图像识别模块32对眼球追踪定位系统2传输的信息进行识别,将图片转换成系统可以理解的信息,图像处理模块33对信息进行处理,理解此时驾驶员的意图,屏幕控制模块34根据驾驶员的意图发出屏幕控制指令。如图3所示,图像处理模块33的身份识别系统331识别出车主身份,眼控操作系统332理解车主想要进行的操作,进而由屏幕控制模块34发出控制指令。如图4所示,使用者凝视显车载显示屏1中的四个点进行校准,校准后视线焦点所在的中间点会变红。将这四个点的坐标提取出来进行分析,生成一套坐标系,车载显示屏1上方点为(0,1),车载显示屏1下方点为(0,-1),车载显示屏1左方点为(-1,0),车载显示屏1右方点为(1,0)。当使用者凝视车载显示屏1上方点时为增大音量指令,下方点为减小音量指令,左为向左翻页,右为向右翻页。所述的图像采集模块31的型号为TMS320DM642,图像识别模块32的型号为ShuffleNet,图像处理模块33的型号为Hi3559AV100,屏幕控制模块34的型号为ADS7843。本专利技术的工作原理如下:用眼球追踪处理器3的身份识别系统331对收集的驾驶员信息进行虹膜识别,验证驾驶员身份,然后发出指令将车辆设置为次驾驶员的预设状态。用眼球追踪定位系统2能让使用者通过凝视车载显示屏1不同的位置达到左右翻页、调节音量的目的。眼球追踪定位系统2通过红外摄像头捕捉到眼球相应的位置,以两瞳孔中心连线的中点为0点建立笛卡尔坐标系,得到两个瞳孔位置的坐标值,将瞳孔位置的坐标值不断的输出至眼球追踪处理器3,眼球追踪处理器3对集的信号运用算法处理并转化为控制指令,并将指令传达给屏幕控制模块34。例如,驾驶员凝本文档来自技高网...
【技术保护点】
1.一种车载眼神交互装置,其特征在于:包括车载显示屏(1)、眼球追踪定位系统(2)以及眼球追踪处理器(3),所述眼球追踪定位系统(2)包括用于捕捉眼球相应的位置的红外摄像头,红外摄像头与眼球追踪处理器(3)相连,眼球追踪处理器(3)包括图像采集模块(31)、图像识别模块(32)、图像处理模块(33)和屏幕控制模块(34),图像处理模块(33)包括身份识别系统(331)和眼控操作系统(332);车载眼神交互装置在工作时,通过眼球追踪定位系统(2)提取驾驶员的眼部4特征,然后将信息传输给眼球追踪处理器(3),眼球追踪处理器(3)对信息进行处理后发出屏幕控制指令给车载显示屏(1),车载显示屏(1)得到指令后进行相应动作。
【技术特征摘要】
1.一种车载眼神交互装置,其特征在于:包括车载显示屏(1)、眼球追踪定位系统(2)以及眼球追踪处理器(3),所述眼球追踪定位系统(2)包括用于捕捉眼球相应的位置的红外摄像头,红外摄像头与眼球追踪处理器(3)相连,眼球追踪处理器(3)包括图像采集模块(31)、图像识别模块(32)、图像处理模块(33)和屏幕控制模块(34),图像处理模块(33)包括身份识别系统(331)和眼控操作系统(332);车载眼神交互装置在工作时,通过眼球追踪定位系统(2)提取驾驶员的眼部4特征,然后将信息传输给眼球追踪处理器(3),眼球追踪处理器(3)对信息进行处理后发出屏幕控制指令给车载显示屏(1),车载显示屏(1)得到指令后进行相应动作。2.根据权利要求1所述的一种车载眼神交互装置,其特征在于:所述的眼球追踪处理器(3)的图像采集模块(31)接收眼球追踪定位系统(2)...
【专利技术属性】
技术研发人员:于振勇,李彦奇,
申请(专利权)人:一汽轿车股份有限公司,
类型:发明
国别省市:吉林,22
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。