装置控制方法、系统、电子装置及计算机可读存储介质制造方法及图纸

本申请实施例提供一种装置控制方法、系统、电子装置及计算机可读存储介质，涉及通信技术领域，其中方法包括根据当前的应用场景，确定待采集的用户的生物电信号的种类；通过生物电信号采集器，对确定的至少一种生物电信号进行采集，并从采集的至少一种生物电信号中提取特征数据；将提取的特征数据输入分类器，以识别该用户的意图；将该分类器输出的数据转换为对应的机器控制指令，并执行该机器控制指令对应的操作。本申请可实现基于多模式生物电信号融合的人机交互。

Device Control Method, System, Electronic Device and Computer Readable Storage Media

【技术实现步骤摘要】
装置控制方法、系统、电子装置及计算机可读存储介质
本申请涉及通信
，尤其涉及一种装置控制方法、系统、电子装置及计算机可读存储介质。
技术介绍
目前主流市场中传统的人机交互方式都是通过人脑信息传输到四肢再到移动终端，然后移动终端呈现的信息再反馈给人脑这样一条信息通路实现，传统交互方式中人在接收到终端信息时由大脑产生想法或者意识，通过人体中枢神经系统指挥躯干以及四肢对想法或意识做出响应。但是，一方面，人的意识传递到躯干以及四肢需要一定的时间，另一方面，对于某些身体有残疾的用户来说，由于无法通过躯干以及四肢将意识传输给移动终端，也就无法使得移动终端作出响应的反应。因此，如何更高效地将人的意识传递给移动终端并对移动终端进行控制，是当前业内的一大难题。
技术实现思路
本申请实施例提供一种装置控制方法、系统、电子装置及计算机可读存储介质，可用于实现基于多模式生物电信号融合的人机交互。本申请实施例一方面提供了一种装置控制方法，所述方法包括：根据当前的应用场景，确定待采集的用户的生物电信号的种类；通过生物电信号采集器，对确定的至少一种生物电信号进行采集，并从采集的至少一种生物电信号中提取特征数据；将提取的特征数据输入分类器，以识别所述用户的意图；将所述分类器输出的数据转换为对应的机器控制指令，并执行所述机器控制指令对应的操作。本申请实施例一方面还提供了一种装置控制方法，所述方法包括：被控装置根据当前的应用场景，确定待采集的用户的生物电信号的种类，并将确定的种类发送给控制装置；所述控制装置通过生物电信号采集器，根据所述确定的种类，对至少一种生物电信号进行采集，并从采集的至少一种生物电信号中提取特征数据，将提取的特征数据输入分类器，以识别所述用户的意图，将所述分类器输出的数据转换为对应的机器控制指令，并将所述机器控制指令发送给所述被控装置；所述被控装置响应于所述机器控制指令，执行对应的操作。本申请实施例一方面还提供了一种电子装置，包括：确定模块，用于根据当前的应用场景，确定待采集的用户的生物电信号的种类；采集模块，用于通过生物电信号采集器，对确定的至少一种生物电信号进行采集，并从采集的至少一种生物电信号中提取特征数据；识别模块，用于将提取的特征数据输入分类器，以识别用户的意图；转换模块，用于将所述分类器输出的数据转换为对应的机器控制指令；执行模块，用于执行所述机器控制指令对应的操作。本申请实施例一方面还提供了一种电子装置，包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时，实现如上述实施例提供的装置控制方法。本申请实施例一方面还提供了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时，实现如上述实施例提供的装置控制方法。本申请实施例一方面还提供了一种装置控制系统，所述系统包括：电子装置和信号采集装置；所述信号采集装置包括：采集器、微处理单元、数据传输单元和固定带；所述微处理单元，用于根据所述电子装置发送的待采集的用户的至少一种生物电信号的种类信息，控制所述采集器采集所述至少一种生物电信号，并将采集的电信号经过预处理后，通过所述数据传输单元发送给所述电子装置；所述电子装置，用于根据当前的应用场景，确定所述种类信息并发送给所述信号采集装置；以及从经过预处理的生物电信号中提取特征数据，将提取的特征数据输入分类器，以识别所述用户的意图，将所述分类器输出的数据转换为对应的机器控制指令，并执行所述机器控制指令对应的操作。上述各实施例，通过根据当前的应用场景，对与当前的应用场景相匹配的至少一种生物电信号进行采集，并从采集的至少一种生物电信号中提取特征数据，然后通过分类器根据提取的特征数据识别用户的意图并将其转换为对应的机器控制指令，从而实现对电子装置的控制，并在实现了基于多模式生物电信号融合的人机交互同时，可使得意图识别相对于当前的应用场景更具有针对性。附图说明图1为本申请一实施例提供的装置控制方法的实现流程示意图；图2为意识任务激发的ERS或ERD现象的示意图；图3为本申请实施例提供的装置控制方法中生物电信号采集位置与方式的示意图；图4为本申请另一实施例提供的装置控制方法的实现流程示意图；图5为本申请实施例提供的装置控制方法中特征数据选取方法的示意图；图6为本申请实施例提供的装置控制方法中对分类器进行训练的示意图；图7为本申请另一实施例提供的装置控制方法的时序流程示意图；图8为本申请另一实施例提供的装置控制方法的交互示意图；图9为本申请一实施例提供的电子装置的硬件结构示意图；图10为本申请一实施例提供的电子装置的硬件结构示意图；图11为一种电子设备的硬件结构示意图；图12为本申请一实施例提供的装置控制系统的结构示意图；图13为本申请实施例提供的装置控制系统中信号采集装置的结构示意图。具体实施方式为使得本申请的专利技术目的、特征数据、优点能够更加的明显和易懂，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而非全部实施例。基于本申请中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。请参阅图1，为本申请一实施例提供的装置控制方法的实现流程示意图。该方法可应用于电子装置，如：手机、平板电脑、智能可穿戴设备、智能相机等可在移动中进行数据处理的电子装置，或者，智能电视、台式计算机等非可在移动中进行数据处理的电子装置。该电子装置通过无线网络或数据线连接的方式与生物电信号采集器建立数据传输通道，生物电信号采集器用于采集人的生物电信号，可以但不限于包括：脑电、心电、肌电以及眼电信号。如图1所示，该方法主要包括：S101、根据当前的应用场景，确定待采集的用户的生物电信号的种类；生物电信号有很多种类，于本实施例中，具体可以但不限于包括：脑电、肌电、眼电以及心电等。生物电信号以一种非常微弱电压信号记录了生物生理活动的指标，从生理机制层面解释，它是大量神经元同步发生突触后形成的电位，是中枢神经系统对外可被检测的一种物理反映，其本质是离子的跨膜运动，这些信号是由上亿个神经元共同产生，不同区域负责的功能不一样，所产生的电位及特点均不同，电荷由神经元产生，通过电解质传导之头皮上的电极，拉动或推动电极上的金属电子，电极之间的微弱电压差被高精度高性能放大器放大，这些随时间变化而变化的电压就是采集的生物电信号。生物的一些生理或者心理上的微弱变化均可在生物电信号上体现出来，例如人大脑的意识活动、情绪变化、意识眨眼等等都可以通过提取的生物电信号特征来判断出来。以脑电波(Electroencephalogram，EEG)为例，不同频率的脑电波蕴含着不同的生理信息，自发脑电是大脑皮层进行思维活动自发产生的生物电活动，皮层特定区域会有持续性节律性电位变化，大脑在不同意识状态下会自发产生不同的节律，通常将EEG按照频段来分类，可分为δ波、θ波、α波、mu波、β波，五种脑电波的具体特征下如表1所示。表1不同频段EEG信号及特点人体在进行意识想象时也会诱发不同的生物电信号，人体实际肢体运动或者想象肢体运动的过程均会引起大脑顶部的运动功能区、辅助运动区以及体感区的mu和本文档来自技高网...

【技术保护点】
1.一种装置控制方法，应用于电子装置，其特征在于，所述方法包括：根据当前的应用场景，确定待采集的用户的生物电信号的种类；通过生物电信号采集器，对确定的至少一种生物电信号进行采集，并从采集的至少一种生物电信号中提取特征数据；将提取的特征数据输入分类器，以识别所述用户的意图；将所述分类器输出的数据转换为对应的机器控制指令，并执行所述机器控制指令对应的操作。

【技术特征摘要】
1.一种装置控制方法，应用于电子装置，其特征在于，所述方法包括：根据当前的应用场景，确定待采集的用户的生物电信号的种类；通过生物电信号采集器，对确定的至少一种生物电信号进行采集，并从采集的至少一种生物电信号中提取特征数据；将提取的特征数据输入分类器，以识别所述用户的意图；将所述分类器输出的数据转换为对应的机器控制指令，并执行所述机器控制指令对应的操作。2.如权利要求1所述的方法，其特征在于，所述方法还包括：采集作为样本的不同应用场景下所述用户的不同意图对应的至少一种生物电信号；从采集的至少一种生物电信号中提取特征数据；将提取的特征数据输入所述分类器进行有监督的分类，并判断分类精度是否达到预设的阈值；若所述分类精度达到所述阈值，则输出最优分类器，以用于用户意图识别；若所述分类精度未达到所述阈值，则将提取的特征数据加入到样本数据库内，并更新所述分类器。3.如权利要求2所述的方法，其特征在，所述从采集的至少一种生物电信号中提取特征数据，具体包括：通过高精度放大器对采集的至少一种生物电信号进行电压放大；对电压放大后的生物电信号进行频域滤波；对频域滤波后的生物电信号进行空域滤波；评估空域滤波后的生物电信号的强度是否达到预设强度；若未达到所述预设强度，则对所述强度小于所述预设强度的生物电信号重新进行采集；若达到所述预设强度，则从空域滤波后的生物电信号中提取所述特征数据。4.如权利要求3所述的方法，其特征在于，所述对电压放大后的生物电信号进行频域滤波，具体包括：通过陷波器消除所述电压放大后的生物电信号中的工业噪声；通过带通滤波器对消除工业噪声后的生物电信号进行滤波，所述带通滤波器是具有线性相位的有限长脉冲响应滤波器，且所述带通滤波器与待滤波的所述生物电信号的频率特征相匹配。5.如权利要求3所述的方法，其特征在于，所述对频域滤波后的生物电信号进行空域滤波，具体包括：将所有导联的瞬时信号均值作为参考信号，对所述频域滤波后的生物电信号进行空域滤波，其中采用的公式为：其中，为空域滤波后的信号，Xi为空域滤波前原始信号。6.如权利要求1所述的方法，其特征在于，所述方法还包括：获取所述用户在所述操作与所述用户的意图不符时输入的反馈信息；根据所述反馈信息，更新所述分类器。7.如权利要求1至6中的任一项所述的方法，其特征在于，当所述机器控制指令用于触发解锁密码设置操作时，所述执行所述机器控制指令对应的操作，具体包括：输出用于解锁的目标意图的提示信息，并通过所述生物电信号采集器，根据所述用户的选择操作，采集所述用户的眼电、脑电、心电和肌点中的任意两种第一生物电信号；从所述第一生物电信号中提取第一特征数据，并保存在所述电子装置中；当所述当前的应用场景为解锁场景时，所述方法还包括：当解锁任务被触发时，通过所述生物电信号采集器，采集所述用户的第二生物电信号，所述第二生物电信号的种类与所述第一生物电信号相同；从所述第二生物电信号中提取第二特征数据，并当所述第二特征数据与所述第一特征数据的匹配度大于预设匹配度时，执行解锁操作。8.一种装置控制方法，其特征在于，所述方法包括：被控装置根据当前的应用场景，确定待采集的用户的生物电信号的种类，并将确定的种类信息发送给控制装置；所述控制装置通过生物电信号采集器，根据所述确定的种类信息，对至少一种生物电信号进行采集，从采集的至少一种生物电信号中提取特征数据，将提取的特征数据输入分类器，以识别所述用户的意图，将所述分类器输出的数据转换为对应的机器控制指令，并将所述机器控制指令发送给所述被控装置；所述被控装置响应于所述机器控制指令，执行对应的操作。9.如权利要求8所述的方法，其特征在于，所述方法还包括：所述被控装置指令所述控制装置通过生物电信号采集器，采集作为样本的不同应用场景下所述用户的不同意图对应的至少一种生物电信号，并将采集的至少一种生物电信号发送给服务器；所述服务器从所述采集的至少一种生物电信号中提取特征数据，将提取的特征数据输入所述分类器进行有监督的分类，并判断分类精度是否达到预设的阈值若所述分类精度达到所述阈值，则输出最优分类器并发送给所述控制装置，以用于用户意图识别，若所述分类精度未达到所述阈值，则将提取的特征数据加入到样本数据库内，并更新所述分类器。10.如权利要求9所述的方法，其特征在于，所述方法还包...

【专利技术属性】
技术研发人员：陈刚，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：广东,44