家电设备的控制方法、系统及存储介质技术方案

本申请公开了一种家电设备的控制方法、系统及存储介质，涉及智能家居/智慧家庭技术领域，该家电设备的控制方法包括：获取用户的多张手势图像，其中，多张手势图像是由具有图像采集功能的多个家电设备对用户的同一手势动作进行拍摄得到的；对每张手势图像进行特征提取，得到显示信息特征和动作特征；根据显示信息特征，对多张手势图像进行优先级排序，将优先级最高的手势图像对应的家电设备确定为目标家电设备；根据优先级最高的手势图像的动作特征，确定优先级最高的手势图像对应的操作指令，将操作指令发送至目标家电设备，以对目标家电设备进行控制。本申请提高了手势操作家电设备的识别准确性，使得用户体验度提升。使得用户体验度提升。使得用户体验度提升。

【技术实现步骤摘要】
家电设备的控制方法、系统及存储介质


[0001]本申请涉及智能家居
，尤其涉及一种家电设备的控制方法、系统及存储介质。

技术介绍

[0002]在传统的家电控制过程中，使用遥控器实现对家电的控制，存在遥控器控制功能较少，且遥控器易丢失等问题，不方便用户使用。而通过手机程序实现智能家电的控制操作，则操作过程较复杂，尤其是大量不会使用智能手机的老年人。
[0003]随时智能家电的技术不断进步，出现了语音操作和手势操作等方式，实现对家电设备的无触摸操作。尤其是手势操作功能，通过使用摄像头实现无触摸手势识别的功能，不仅操作简单，更能为一些特殊用户，例如，聋哑用户无法通过语音操作空调，而手势操作正好为这些特殊用户实现空调的智能操作。
[0004]在当前智慧家庭环境中，越来越多的家电设备具备了手势操作功能，通过手势控制家电设备时，往往会出现手势操作识别错误的问题，例如，控制智能电视的手势操作，被识别成智能空调的手势操作，无法较为准确的识别属于智能空调的手势操作，用户体验度较差。因此。现在亟需一种家电设备的控制方法、系统及存储介质来解决上述问题。

技术实现思路

[0005]本申请提供一种家电设备的控制方法、系统及存储介质，用以解决现有技术中智慧家庭环境内家电设备手势操作识别率较低的缺陷，实现从多种家电设备同时采集到的手势图像中，准确判断手势动作是否属于用于控制对应的家电设备。
[0006]本申请提供一种家电设备的控制方法，包括：
[0007]获取用户的多张手势图像，其中，所述多张手势图像是由具有图像采集功能的多个家电设备对所述用户的同一手势动作进行拍摄得到的；
[0008]对每张所述手势图像进行特征提取，得到每张所述手势图像对应的显示信息特征和动作特征；
[0009]根据每张所述手势图像对应的显示信息特征，对所述多张手势图像进行优先级排序，将优先级最高的手势图像对应的家电设备确定为第一目标家电设备；
[0010]根据所述优先级最高的手势图像的动作特征，确定所述优先级最高的手势图像对应的操作指令，将所述操作指令发送至所述第一目标家电设备，以对所述第一目标家电设备进行控制。
[0011]根据本申请提供的一种家电设备的控制方法，所述显示信息特征包括手势动作的偏转角度、显示面积占比和掌心朝向中的至少一个；
[0012]所述根据每张所述手势图像对应的显示信息特征，对所述多张手势图像进行优先级排序，将优先级最高的手势图像对应的家电设备确定为第一目标家电设备，包括：
[0013]根据每张所述手势图像对应的手势动作的偏转角度、显示面积占比和掌心朝向中
的至少一个，对所述多张手势图像进行优先级排序，将优先级最高的手势图像对应的家电设备确定为第一目标家电设备。
[0014]根据本申请提供的一种家电设备的控制方法，所述根据每张所述手势图像对应的手势动作的偏转角度、显示面积占比和掌心朝向中的至少一个，对所述多张手势图像进行优先级排序，将优先级最高的手势图像对应的家电设备确定为第一目标家电设备，包括：
[0015]根据每张所述手势图像对应的显示信息特征，得到每张所述手势图像的偏转角得分、显示面积占比得分和掌心朝向得分；
[0016]根据偏转角度、显示面积占比和掌心朝向在所述多张手势图像的优先级排序中的权重，以及每张所述手势图像对应的偏转角得分、显示面积占比得分和掌心朝向得分，得到每张所述手势图像对应的优先级排序结果；
[0017]根据所述多张手势图像的优先级排序结果，将优先级最高的手势图像对应的家电设备确定为第一目标家电设备。
[0018]根据本申请提供的一种家电设备的控制方法，所述根据每张所述手势图像对应的手势动作的偏转角度、显示面积占比和掌心朝向中的至少一个，对所述多张手势图像进行优先级排序，将优先级最高的手势图像对应的家电设备确定为第一目标家电设备，还包括：
[0019]通过所述显示面积占比，对所述多张手势图像进行排序，得到所述多张手势图像的手势面积占比排序结果；
[0020]根据所述手势面积占比排序结果，将手势面积占比最高的手势图像对应的家电设备确定为第一目标家电设备。
[0021]根据本申请提供的一种家电设备的控制方法，在所述通过所述显示面积占比，对所述多张手势图像进行排序，得到所述多张手势图像的手势面积占比排序结果之后，所述方法还包括：
[0022]若存在多个手势面积占比最高的手势图像，则通过所述偏转角度，对多个手势面积占比最高的手势图像进行排序，得到多个手势面积占比最高的手势图像的偏转角度排序结果；
[0023]所述根据所述手势面积占比排序结果，将手势面积占比最高的手势图像对应的家电设备确定为第一目标家电设备，包括：
[0024]根据所述偏转角度排序结果，将手势面积占比最高且偏转角度最小的手势图像对应的家电设备确定为第一目标家电设备。
[0025]根据本申请提供的一种家电设备的控制方法，在所述通过所述显示面积占比，对所述多张手势图像进行排序，得到所述多张手势图像的手势面积占比排序结果之前，所述方法还包括：
[0026]对每张手势图像中手势动作的掌心朝向进行识别；
[0027]根据识别结果，将存在掌心区域的手势图像进行存储，构建得到手势图像集；
[0028]所述通过所述显示面积占比，对所述多张手势图像进行排序，得到所述多张手势图像的手势面积占比排序结果，包括：
[0029]通过所述显示面积占比，对所述手势图像集中每张手势图像进行排序，得到所述手势图像集中手势图像的手势面积占比排序结果。
[0030]根据本申请提供的一种家电设备的控制方法，根据所述优先级最高的手势图像的
动作特征，确定所述优先级最高的手势图像对应的操作指令，包括：
[0031]根据所述优先级最高的手势图像的动作特征，从所述第一目标家电设备对应的手势功能库中匹配出与所述动作特征相似度最高的手势功能；
[0032]基于所述手势功能，生成所述优先级最高的手势图像对应的操作指令。
[0033]根据本申请提供的一种家电设备的控制方法，所述方法还包括：
[0034]若根据所述优先级最高的手势图像的动作特征，从所述第一目标家电设备对应的手势功能库中无法匹配出与所述动作特征相似度超过预设阈值的手势功能，则将所述优先级最高的手势图像的动作特征与其他家电设备对应的手势功能库进行匹配；
[0035]若匹配到第二目标家电设备的手势功能，基于所述第二目标家电设备的手势功能，生成所述优先级最高的手势图像对应的操作指令，将所述操作指令发送至所述第二目标家电设备。
[0036]本申请还提供一种家电设备的控制系统，包括：
[0037]手势图像采集模块，用于获取用户的多张手势图像，其中，所述多张手势图像是由具有图像采集功能的多个家电设备对所述用户的同一手势动作进行拍摄得到的；
[0038]手势特征提取模块，用于对每张所述手势图像进行特征本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种家电设备的控制方法，其特征在于，包括：获取用户的多张手势图像，其中，所述多张手势图像是由具有图像采集功能的多个家电设备对所述用户的同一手势动作进行拍摄得到的；对每张所述手势图像进行特征提取，得到每张所述手势图像对应的显示信息特征和动作特征；根据每张所述手势图像对应的显示信息特征，对所述多张手势图像进行优先级排序，将优先级最高的手势图像对应的家电设备确定为第一目标家电设备；根据所述优先级最高的手势图像的动作特征，确定所述优先级最高的手势图像对应的操作指令，将所述操作指令发送至所述第一目标家电设备，以对所述第一目标家电设备进行控制。2.根据权利要求1所述的家电设备的控制方法，其特征在于，所述显示信息特征包括手势动作的偏转角度、显示面积占比和掌心朝向中的至少一个；所述根据每张所述手势图像对应的显示信息特征，对所述多张手势图像进行优先级排序，将优先级最高的手势图像对应的家电设备确定为第一目标家电设备，包括：根据每张所述手势图像对应的手势动作的偏转角度、显示面积占比和掌心朝向中的至少一个，对所述多张手势图像进行优先级排序，将优先级最高的手势图像对应的家电设备确定为第一目标家电设备。3.根据权利要求2所述的家电设备的控制方法，其特征在于，所述根据每张所述手势图像对应的手势动作的偏转角度、显示面积占比和掌心朝向中的至少一个，对所述多张手势图像进行优先级排序，将优先级最高的手势图像对应的家电设备确定为第一目标家电设备，包括：根据每张所述手势图像对应的显示信息特征，得到每张所述手势图像的偏转角得分、显示面积占比得分和掌心朝向得分；根据偏转角度、显示面积占比和掌心朝向在所述多张手势图像的优先级排序中的权重，以及每张所述手势图像对应的偏转角得分、显示面积占比得分和掌心朝向得分，得到每张所述手势图像对应的优先级排序结果；根据所述多张手势图像的优先级排序结果，将优先级最高的手势图像对应的家电设备确定为第一目标家电设备。4.根据权利要求2所述的家电设备的控制方法，其特征在于，所述根据每张所述手势图像对应的手势动作的偏转角度、显示面积占比和掌心朝向中的至少一个，对所述多张手势图像进行优先级排序，将优先级最高的手势图像对应的家电设备确定为第一目标家电设备，还包括：通过所述显示面积占比，对所述多张手势图像进行排序，得到所述多张手势图像的手势面积占比排序结果；根据所述手势面积占比排序结果，将手势面积占比最高的手势图像对应的家电设备确定为第一目标家电设备。5.根据权利要求4所述的家电设备的控制方法，其特征在于，在所述通过所述显示面积占比，对所述多张手势图像进行排序，得到所述多张手势图像的手势面积占比排序结果之后，所述方法还包括：
若存在多个手势面积占比最高的手势图像，则通过所述偏转角度，对多个手势面积占比最高的手势图像进行排序...

【专利技术属性】
技术研发人员：禹鸿斐，
申请(专利权)人：海尔智家股份有限公司，
类型：发明
国别省市：