本申请公开了一种感知信息的处理方法、存储介质及电子装置，涉及场景识别技术领域，该方法包括：获取第一感知传感器感知到的第一感知信息，其中，第一感知传感器为单一模态的感知传感器，第一感知信息用于识别目标场景；确定利用第一感知信息识别目标场景对应的置信度；在置信度满足预设条件的情况下，控制第二感知传感开启器，并获取第二感知传感器感知到的第二感知信息；利用第一感知信息和第二感知信息识别目标场景。信息识别目标场景。信息识别目标场景。
【技术实现步骤摘要】
感知信息的处理方法及装置、家电设备
[0001]本申请涉及场景识别
，具体而言，涉及一种感知信息的处理方法及装置、家电设备及计算机可读的存储介质。
技术介绍
[0002]人工智能(Artificial Intelligence，AI)助理在感知用户场景的时候，有时单一模态的感知能力(如麦克风声学)开启后，无法确切地识别场景，例如期望通过声音识别用户感冒、发烧等。但是如果同时开启多种感知能力(如麦克风声学和视觉等)，对于机器是一种资源浪费。
技术实现思路
[0003]本申请实施例提供了一种感知信息的处理方法及装置、家电设备，以至少解决人工智能助理在感知用户场景时，有时通过单一模态的感知传感器无法准确识别场景，但是如果同时开启多种模态的感知传感器又会造成资源浪费的技术问题。
[0004]根据本申请实施例的一个方面，提供了一种感知信息的处理方法，包括：获取第一感知传感器感知到的第一感知信息，其中，第一感知传感器为单一模态的感知传感器，第一感知信息用于识别目标场景；确定利用第一感知信息识别目标场景对应的置信度；在置信度满足预设条件的情况下，控制第二感知传感器开启，并获取第二感知传感器感知到的第二感知信息；利用第一感知信息和第二感知信息识别目标场景。
[0005]可选地，控制第二感知传感器开启之前，上述方法还包括：判断置信度是否低于第一预设阈值；如果置信度低于第一预设阈值，确定置信度满足预设条件；如果置信度高于第一预设阈值，确定置信度不满足预设条件。
[0006]可选地，第一感知信息包括：音频信息，第二感知传感器为摄像头，获取第二感知传感器感知到的第二感知信息，包括：接收摄像头获取到的多个图像帧；对多个图像帧进行图像检测，确定各图像帧对应的动作特征；将多个图像帧中包含目标动作特征的目标图像帧确定为第二感知信息，其中，目标动作特征与音频信息具有关联关系。
[0007]可选地，目标动作特征包括：第一动作特征和第二动作特征，其中，第一动作特征是与音频信息对应的动作特征；第二动作特征是与第一动作特征和音频信息具有关联关系的动作特征。
[0008]可选地，利用第一感知信息和第二感知信息识别目标场景，包括：确定所述音频信息对应的第一动作关键词以及所述目标动作特征对应的第二动作关键词；确定所述第一动作关键词与第二动作关键词的匹配度；在所述匹配度高于第二预设阈值的情况下，将依据所述音频信息识别得到的所述目标场景作为最终的场景识别结果。
[0009]可选地，上述方法还包括：获取目标家电设备对目标场景的识别结果，其中，目标家电设备是与第一感知传感器和第二感知传感器所在的家电设备位于同一预设范围内的家电设备；如果识别结果与目标场景相同，确定成功识别目标场景。
[0010]可选地，第二感知传感器包括：单一模态的感知传感器或者多种模态的感知传感器；在第二感知传感器包括多种模态的感知传感器的情况下，开启第二感知传感器，包括：确定识别的目标场景的类型；从数据库中查找与目标场景的类型对应的第二感知传感器的类型；开启与目标场景的类型对应的类型的第二感知传感器。
[0011]可选地，利用第一感知信息和第二感知信息识别目标场景之后，上述方法还包括：生成提示信息，其中，提示信息用于提示目标对象执行与目标场景对应的操作；控制家电设备执行与目标场景对应的操作。
[0012]根据本申请实施例的另一方面，还提供了一种感知信息的处理装置，包括：第一获取模块，用于获取第一感知传感器感知到的第一感知信息，其中，第一感知传感器为单一模态的感知传感器，第一感知信息用于识别目标场景；第一确定模块，用于确定利用第一感知信息识别目标场景对应的第一置信度；处理模块，用于在第一置信度满足预设条件的情况下，控制第二感知传感器开启，并获取第二感知传感器感知到的第二感知信息；识别模块，用于利用第一感知信息和第二感知信息识别目标场景。
[0013]根据本申请实施例的另一方面，还提供了一种家电设备，包括：控制器以及多个感知传感器，其中，多个感知传感器，用于感知感知信息，其中，感知信息用于识别目标场景；控制器，与多个感知传感器连接，用于执行以上的感知信息的处理方法。
[0014]根据本申请实施例的再一方面，还提供了一种计算机可读的存储介质，计算机可读的存储介质包括存储的程序，其中，程序运行时执行以上的感知信息的处理方法。
[0015]根据本申请实施例的再一方面，还提供了一种电子装置，包括存储器和处理器，存储器中存储有计算机程序，处理器被设置为通过计算机程序执行以上的感知信息的处理方法。
[0016]在本申请实施例中，采用获取第一感知传感器感知到的第一感知信息，其中，第一感知传感器为单一模态的感知传感器，第一感知信息用于识别目标场景；确定利用第一感知信息识别目标场景对应的置信度；在置信度满足预设条件的情况下，控制第二感知传感器开启，并获取第二感知传感器感知到的第二感知信息；利用第一感知信息和第二感知信息识别目标场景的方式，通过在单一模态的感知传感器开启后，通过感知结果判断，若感知信息缺失，则增加其他模态的感知传感器，以补齐单一模态传感器感知信息的缺失，达到了解决单一模态的感知传感器无法准确识别场景的问题，同时，可以按需开启某一模态的感知传感器，避免了所有场景下都同时需要开启多模态感知传感器的目的，从而实现了提升了AI助理的多模态感知能力，在不降低用户体验的前提下节约了机器运行资源的技术效果，进而解决了人工智能助理在感知用户场景时，有时通过单一模态的感知传感器无法准确识别场景，但是如果同时开启多种模态的感知传感器又会造成资源浪费技术问题。
附图说明
[0017]此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。
[0018]为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
[0019]图1是根据本申请实施例的一种感知信息的处理方法的硬件环境示意图；
[0020]图2是根据本申请实施例的一种感知信息的处理方法的流程图；
[0021]图3是根据本申请实施例的一种感知信息的处理装置的结构框图；
[0022]图4是根据本申请实施例的一种家电设备的结构框图。
具体实施方式
[0023]为了使本
的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。
[0024]需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种感知信息的处理方法，其特征在于，包括：获取第一感知传感器感知到的第一感知信息，其中，所述第一感知传感器为单一模态的感知传感器，所述第一感知信息用于识别目标场景；确定利用所述第一感知信息识别所述目标场景对应的置信度；在所述置信度满足预设条件的情况下，控制第二感知传感器开启，并获取所述第二感知传感器感知到的第二感知信息；利用所述第一感知信息和所述第二感知信息识别所述目标场景。2.根据权利要求1所述的方法，其特征在于，控制第二感知传感器开启之前，所述方法还包括：判断所述置信度是否低于第一预设阈值；如果所述置信度低于所述第一预设阈值，确定所述置信度满足所述预设条件；如果所述置信度高于所述第一预设阈值，确定所述置信度不满足所述预设条件。3.根据权利要求1或2所述的方法，其特征在于，所述第一感知信息包括音频信息，所述第二感知传感器为摄像头，所述获取所述第二感知传感器感知到的第二感知信息，包括：接收所述摄像头获取到的多个图像帧；对所述多个图像帧进行图像检测，确定各图像帧对应的动作特征；将所述多个图像帧中包含目标动作特征的目标图像帧确定为所述第二感知信息，其中，所述目标动作特征与所述音频信息具有关联关系。4.根据权利要求3所述的方法，其特征在于，所述目标动作特征包括：第一动作特征和第二动作特征，其中，所述第一动作特征是与所述音频信息对应的动作特征；所述第二动作特征是与所述第一动作特征和所述音频信息具有关联关系的动作特征。5.根据权利要求3所述的方法，其特征在于，利用所述第一感知信息和所述第二感知信息识别所述目标场景，包括：确定所述音频信息对应的第一动作关键词以及所述目标动作特征对应的第二动作关键词；确定所述第一动作关键词与第二动作关键词的匹配度；在所述匹配度高于第二预设阈值的情况下，将依据所述音频信息识别得到的所述目标场景作为最终的场景识别结果。6.根据权利要求1所述的方法，其特征在于，所述方法还包括：获取目标家电设备对所述目标场景的识别结果，其中，所述目标家电设备是与所述第一感知传感器和所述第二感知传感器所...
【专利技术属性】
技术研发人员：王凯，
申请(专利权)人：海尔智家股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。