基于脑电/语音指令助残控制系统技术方案

本发明专利技术公开了一种基于脑电/语音指令助残控制系统，由计算机、脑电波采集装置、脑机接口装置、蓝牙耳麦、家居控制装置、轮椅控制装置与电动轮椅组成；其中，所述的脑电波采集装置通过脑机接口装置收集使用者脑电信号，计算机接收到脑电信号转换成计算机键盘事件；所述的蓝牙耳麦将使用者发出的语音指令无线传输到计算机中，语音识别程序对语音指令进行识别处理，将语音指令转换成计算机键盘事件；所述的计算机键盘事件再转换为数字信号，通过家居控制装置实现常见家用电器的控制以及通过轮椅控制装置改变电动轮椅的控制电位，实现轮椅前进、后退、向左、向右、停止功能。本发明专利技术可以帮助肢体或语言不便等残疾人实现独立生活、自主出行的目的，对于缓解残疾人士的心理压力有很大贡献，并且结构简单，成本低廉，易于操作。

【技术实现步骤摘要】

本专利技术涉及人工智能控制领域，尤其是肢体残疾人群利用脑电波或者语音指令来控制常见的家用电器以及控制轮椅行走的智能装置。
技术介绍
脑机接口是在人或动物脑与外部设备间建立的直接连接通路。对脑机接口的研究已持续40年，20世纪90年代中期以来，从实验中获得的此类知识显著增长。在获取脑电信号方式的角度来看脑机接口分为以下几种:侵入式脑机接口、部分侵入式脑机接口和非侵入式脑机接口 ；所谓非侵入式脑机接口也就是不用将脑机接口直接植入到大脑的灰质或者颅腔内，直接在大脑皮层表面采集信号，从而使脑机接口装置变得轻便，方便携带，是一种理想的实现装置。目前市场上还未见有将轮椅整合到助残控制系统中的产品，而在市场上常见有两种轮椅，一是手动轮椅，二是电动轮椅，但这两种轮椅的控制方式都是利用人的上肢来操作并实现轮椅行走的，上述的两种轮椅都只适用于下肢残疾的人士使用，这使得有一部分上肢残疾的人士无法使用轮椅，从而在生活上造成很多不便。专利201110268891.5公开了一种基于多模态脑机接口的智能轮椅，受试者头戴32导联电极帽，操作过程中需要受试者眼睛距离视觉刺激界面65cm，且需长时间注视界面，进而改变行进状态实现轮椅向各个方向行进，但是在真实的环境中，残疾人不可能随时保持距刺激界面65cm，而且使用者需要经长时间训练才能操作，这样使其实用性受到极大限制，同时存在很大的安全隐患。日本丰田公司也进行了类似的研究，从其公开的外观可知该装置的受试者是头戴多个电极帽，并且处理信号以及控制装置过于庞大，不适合真正使用的残疾人。
技术实现思路
本专利技术主要针对现有技术问题的缺陷和不足，提供一种无需任何肢体操作而利用脑电或语音指令控制常见的家用电器与电动轮椅，在本专利技术运行后可以随时控制家用电器，同时还可以改变轮椅的行进状态。本专利技术是一种可随时控制家用电器而且又不会影响轮椅行进安全的基于脑电/语音指令助残控制系统。为了实现上述目的，本专利技术采用以下技术方案来实现: 一种基于脑电/语音指令助残控制系统，由计算机、脑电波采集装置、脑机接口装置、蓝牙耳麦、家居控制装置、轮椅控制装置与电动轮椅组成； 其中，所述的脑电波采集装置通过脑机接口装置收集使用者脑电信号，计算机接收到脑电信号转换成计算机键盘事件； 所述的蓝牙耳麦将使用者发出的语音指令无线传输到计算机中，语音识别程序对语音指令进行识别处理，将语音指令转换成计算机键盘事件；所述的计算机键盘事件再转换为数字信号，通过家居控制装置实现控制常见的家用电器；计算机键盘事件转换为的数字信号，还可通过轮椅控制装置改变电动轮椅的控制电位，实现轮椅前进、后退、向左、向右、停止功能； 所述的家居控制装置独立安装在室内，与控制计算机通过Wifi环境无线连接，该装置由PLC和控制接口板组成； 所述的轮椅控制装置安装在所述电动轮椅上，其包括PLC和驱动接口板； 所述电动轮椅上还装有超声波测距防撞装置，它由电动轮椅四周装设的超声波传感器组成，所述传感器检测轮椅周围障碍物的距离并反馈到PLC中，随着数据的变化PLC会对轮椅做出相应的控制处理，当距障碍小于预设值时，轮椅上的控制器会自动发出制动控制指令； 通过设置通讯端口和通讯协议，所述数字信号以串行通讯的方式传输给轮椅控制装置。通过设置通讯端口和通讯协议，所述数字信号以串行通讯的方式在wifi环境下无线传输给家居控制装置。首先，使用者需要通过肌肉紧张和松弛产生的脑电信号被脑电波采集装置收集到；其次，在电脑接收到脑电信号或蓝牙耳麦传来的语音信号时需要转换成键盘事件;第三，键盘事件再转换为数字信号输出至PLC中，再由PLC输出相应的控制指令；最后通过PLC实现控制常见的家用电器以及通过PLC控制电位器模拟霍尔元件最终实现轮椅的前进、后退、向左、向右、停止。从而给残疾人士带来便利。由于采用上述技术方案，本专利技术具有以下优点和效果: 1、本专利技术利用脑电/语音双重指令进行控制，增加了控制的多样性、准确性，无需任何肢体操作，使用者可以根据自己的想法控制室内的家用电器以及轮椅的向前、向后、向左、向右、停止操作； 2、本专利技术的脑电波采集装置，佩戴的电极数量少，同时可以保证控制的准确度； 3、本专利技术的控制计算机安装在轮椅上，家居控制装置与计算机无线通讯，这样可以使操作者在室内的任意位置控制家庭中任意的家用电器从而突出了本专利技术操作的便捷性； 4、本专利技术增加了采用冗余设计的容错措施，减小了系统出现误控制的情况； 5、本专利技术设置超声波测距装置，智能的进行障碍物检测，从而增加了残疾人在使用过程中的安全性，减少事故的发生率； 6、本专利技术控制装置体积小，重量轻，成本低廉，系统操作简单，易于实现。附图说明图1为本专利技术系统组成示意 图2为本专利技术计算机应用程序界面示意 图3为本专利技术语音指令控制轮椅示意 图4为本专利技术脑电波指令控制轮椅示意 图5为本专利技术脑电波采集装置模拟示意 图6为本专利技术超声波测距装置安装位置以及运行原理示意 图7为本专利技术原理示意图； 图8为本专利技术原理示意图；图9为本专利技术原理示意 图10为本专利技术原理示意图。具体实施例方式下面结合附图和实施例对本专利技术作进一步详细说明，但本专利技术的实施方式不限于此。本实施例仅描述利用脑电波/语音指令实现控制轮椅行进，其余控制家用电器与控制轮椅的方法类似。如图1所示，脑电、语音轮椅控制系统主要由硬件和软件这两大部分组成，其中:硬件是由计算机、蓝牙耳麦、脑电波采集装置、脑机接口装置、轮椅控制装置(PLC和接口板)以及改装后的电动轮椅组成；软件是由基于脑电/语音指令助残控制系统的计算机应用程序、PLC轮椅控制装置程序组成的。本专利技术的脑电波采集装置以及脑机接口是采用OCZ公司所生产的NIA (NeuralImpulse Actuator)产品，PLC控制器采用的西门子公司生产的S7-200型可编程系控制器。电位器模拟霍尔元件最终实现轮椅的前进、后退、向左、向右、停止。使用者头戴有3个电极的脑电波采集装置以及便携式的蓝牙耳麦，坐在电动轮椅的座椅上，脑机接口与计算机放置在轮椅后背袋内或置于轮椅台面上，基于脑电/语音指令助残控制系统的计算机应用程序安装在计算机内，轮椅控制装置(PLC和接口板)固定在轮椅扶手的下方，并由电动轮椅自带的24V直流电源供电。超声波测距装置由超声波传感器组成，分散放置于轮椅的四周，进行360°无死角探测。如图2所示，基于脑电/语音指令助残控制系统的计算机应用程序界面共有五个按钮，并且五个按钮分别 显示不同的文字，即:前进、后退、向左、向右、停止。在系统启动后，使用者可以使面部肌肉紧张或松弛产生的脑电信号通过采集装置、脑机接口传入计算机中，从而控制轮椅的前进、后退及停止；使用者通过左、右眼肌的张弛产生相应的脑电信号控制轮椅的向左、向右；而且使用者还可以根据界面上按钮控件所显示的提示文字进行语音控制轮椅。如图3所示，使用者发出语音指令通过蓝牙耳麦无线传输到系统计算机中，语音识别程序对语音指令进行识别处理，再由计算机软件将语音指令转换成计算机键盘事件，并通过设置通讯端口和通讯协议，以串行通讯的方式将控制数据传输给可编程序控制器(PLC)，经过控制器程序处理后的输出信号传递到驱动接口板从而控制轮椅行进。如图4所示，本文档来自技高网...

【技术保护点】
一种基于脑电/语音指令助残控制系统，由计算机、脑电波采集装置、脑机接口装置、蓝牙耳麦、家居控制装置、轮椅控制装置与电动轮椅组成；其特征在于：所述的脑电波采集装置通过脑机接口装置收集使用者脑电信号，计算机接收到脑电信号转换成计算机键盘事件；所述的蓝牙耳麦将使用者发出的语音指令无线传输到计算机中，语音识别程序对语音指令进行识别处理，将语音指令转换成计算机键盘事件；所述的计算机键盘事件再转换为数字信号，通过所属的家居控制装置实现常见家用电器的控制以及通过轮椅控制装置改变电动轮椅的控制电位，实现轮椅前进、后退、向左、向右、停止功能。

【技术特征摘要】
1.一种基于脑电/语音指令助残控制系统，由计算机、脑电波采集装置、脑机接口装置、蓝牙耳麦、家居控制装置、轮椅控制装置与电动轮椅组成；其特征在于:所述的脑电波采集装置通过脑机接口装置收集使用者脑电信号，计算机接收到脑电信号转换成计算机键盘事件；所述的蓝牙耳麦将使用者发出的语音指令无线传输到计算机中，语音识别程序对语音指令进行识别处理，将语音指令转换成计算机键盘事件；所述的计算机键盘事件再转换为数字信号，通过所属的家居控制装置实现常见家用电器的控制以及通过轮椅控制装置改变电动轮椅的控制电位，实现轮椅前进、后退、向左、向右、停止功能。2.根据权利要求1所述的基于脑电/语音指令助残控制系统，其特征在于:所述的家居控制装置独立安装在室内，由PLC和控制接口板组成，可实现通过脑电波/语音指令控制常见的家用电器。3.根据权利要求1所述的基于脑...

【专利技术属性】
技术研发人员：王禹，
申请(专利权)人：王禹，
类型：发明
国别省市：北京;11