一种人机交互方法、装置、存储介质及电器设备制造方法及图纸

本发明专利技术公开了一种人机交互方法、装置、存储介质及电器设备，该方法包括：通过双目摄像头识别电器设备所属环境中使用者的手势信息；根据电器设备所属环境中使用者的手势信息，确定电器设备的控制指令；根据电器设备的控制指令，控制电器设备执行该控制指令，以实现电器设备与电器设备所属环境中使用者之间的人机交互。本发明专利技术的方案，可以解决智能设备的人机交互不够多样化的问题，达到使智能设备的人机交互更加多样化的效果。

【技术实现步骤摘要】
一种人机交互方法、装置、存储介质及电器设备
本专利技术属于智能家居
，具体涉及一种人机交互方法、装置、存储介质及电器设备，尤其涉及一种基于双目视觉手势控制的智能设备的人机交互方法、装置、存储介质及电器设备。
技术介绍
智能设备的发展迅速，智能设备上单一的语音控制已经不能够满足用户的需求，人机交互不够多样化是主要原因。上述内容仅用于辅助理解本专利技术的技术方案，并不代表承认上述内容是现有技术。
技术实现思路
本专利技术的目的在于，针对上述缺陷，提供一种人机交互方法、装置、存储介质及电器设备，以解决智能设备的人机交互不够多样化的问题，达到使智能设备的人机交互更加多样化的效果。本专利技术提供一种人机交互方法，包括：通过双目摄像头识别电器设备所属环境中使用者的手势信息；根据电器设备所属环境中使用者的手势信息，确定电器设备的控制指令；根据电器设备的控制指令，控制电器设备执行该控制指令，以实现电器设备与电器设备所属环境中使用者之间的人机交互。可选地，通过双目摄像头识别电器设备所属环境中使用者的手势信息，包括：采用双目摄像头对电器设备所属环境中使用者进行定位，得到电器设备所属环境中使用者的人脸信息；根据电器设备所属环境中使用者的人脸信息，采用双目摄像头识别电器设备所属环境中使用者的位置信息处使用者的手势信息。可选地，采用双目摄像头对电器设备所属环境中使用者进行定位，包括：获取由双目摄像头采集到的电器设备所属环境中使用者的整体图像信息；根据电器设备所属环境中使用者的整体图像信息，对电器设备所属环境中的使用者进行识别和定位，得到电器设备所属环境中使用者的位置信息；根据电器设备所属环境中使用者的位置信息，进一步获取获取由双目摄像头采集到的电器设备所属环境中使用者的人脸图像；根据电器设备所属环境中使用者的人脸图像，电器设备所属环境中使用者的位置信息处使用者的人脸信息。可选地，采用双目摄像头识别电器设备所属环境中使用者的位置信息处使用者的手势信息，包括：根据电器设备所属环境中使用者的位置信息处使用者的人脸信息，确定电器设备所属环境中使用者的脸部是否面向电器设备；若电器设备所属环境中使用者的脸部面向电器设备，则获取电器设备所属环境中使用者的肢体图像；根据电器设备所属环境中使用者的肢体图像，确定电器设备所属环境中使用者的肢体信息，以将电器设备所属环境中使用者的肢体信息确定为电器设备所属环境中使用者的手势信息。可选地，手势信息，包括：手势的种类信息、手势的方向信息、和/或手势的深度信息。可选地，还包括：对电器设备所属环境中使用者的手势信息、电器设备的控制指令、电器设备执行控制指令的执行过程、和/或电器设备执行控制指令的执行结果进行输出；其中，该输出，包括：在电器设备的显示屏上显示，发送至设定的客户端，和/或通过电器设备的语音系统播报。与上述方法相匹配，本专利技术另一方面提供一种人机交互装置，包括：识别单元，用于通过双目摄像头识别电器设备所属环境中使用者的手势信息；确定单元，用于根据电器设备所属环境中使用者的手势信息，确定电器设备的控制指令；控制单元，用于根据电器设备的控制指令，控制电器设备执行该控制指令，以实现电器设备与电器设备所属环境中使用者之间的人机交互。可选地，识别单元通过双目摄像头识别电器设备所属环境中使用者的手势信息，包括：采用双目摄像头对电器设备所属环境中使用者进行定位，得到电器设备所属环境中使用者的人脸信息；根据电器设备所属环境中使用者的人脸信息，采用双目摄像头识别电器设备所属环境中使用者的位置信息处使用者的手势信息。可选地，识别单元采用双目摄像头对电器设备所属环境中使用者进行定位，包括：获取由双目摄像头采集到的电器设备所属环境中使用者的整体图像信息；根据电器设备所属环境中使用者的整体图像信息，对电器设备所属环境中的使用者进行识别和定位，得到电器设备所属环境中使用者的位置信息；根据电器设备所属环境中使用者的位置信息，进一步获取获取由双目摄像头采集到的电器设备所属环境中使用者的人脸图像；根据电器设备所属环境中使用者的人脸图像，电器设备所属环境中使用者的位置信息处使用者的人脸信息。可选地，识别单元采用双目摄像头识别电器设备所属环境中使用者的位置信息处使用者的手势信息，包括：根据电器设备所属环境中使用者的位置信息处使用者的人脸信息，确定电器设备所属环境中使用者的脸部是否面向电器设备；若电器设备所属环境中使用者的脸部面向电器设备，则获取电器设备所属环境中使用者的肢体图像；根据电器设备所属环境中使用者的肢体图像，确定电器设备所属环境中使用者的肢体信息，以将电器设备所属环境中使用者的肢体信息确定为电器设备所属环境中使用者的手势信息。可选地，手势信息，包括：手势的种类信息、手势的方向信息、和/或手势的深度信息。可选地，还包括：控制单元，还用于对电器设备所属环境中使用者的手势信息、电器设备的控制指令、电器设备执行控制指令的执行过程、和/或电器设备执行控制指令的执行结果进行输出；其中，该输出，包括：在电器设备的显示屏上显示，发送至设定的客户端，和/或通过电器设备的语音系统播报。与上述装置相匹配，本专利技术再一方面提供一种电器设备，包括：以上所述的人机交互装置。与上述方法相匹配，本专利技术再一方面提供一种存储介质，包括：所述存储介质中存储有多条指令；所述多条指令，用于由处理器加载并执行以上所述的人机交互方法。与上述方法相匹配，本专利技术再一方面提供一种电器设备，包括：处理器，用于执行多条指令；存储器，用于存储多条指令；其中，所述多条指令，用于由所述存储器存储，并由所述处理器加载并执行以上所述的人机交互方法。本专利技术的方案，通过采用双目摄像头对使用者的位置进行定位，并基于定位位置进行手势识别从而实现人机交互，可以保证控制的精准性。进一步，本专利技术的方案，通过采用双目摄像头对使用者的位置进行定位，并基于定位位置进行手势识别从而实现人机交互，辅助语音系统实现可视化的控制，可以增强用户体验。进一步，本专利技术的方案，通过采用双目摄像头对使用者的位置进行定位，并基于定位位置进行手势识别从而实现人机交互，提取出用户操作时的深度信息的改变，增加手势操控，提升交互的多样性。进一步，本专利技术的方案，通过采用双目摄像头对使用者的位置进行定位，并基于定位位置进行手势识别从而实现人机交互，语音系统在手势控制中会输出语音增添人机交互体验，能形象地反馈设备运行状态，提升用户的使用体验。进一步，本专利技术的方案，通过采用双目摄像头对使用人位置进行定位，并在显示屏关联显示相关控制信息，可以保证控制的精准性，提升用户的使用效率和使用体验。由此，本专利技术的方案，通过采用双目摄像头对使用者的位置进行定位，并对定位位置处使用者的操作手势进行识别，将得到识别信息转换为相应的控制指令实现人机交互，解决智能设备的人机交互不够多样化的问题，达到使智能设备的人机交互更加多样化的效果。本专利技术的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实本文档来自技高网...

【技术保护点】
1.一种人机交互方法，其特征在于，包括：/n通过双目摄像头识别电器设备所属环境中使用者的手势信息；/n根据电器设备所属环境中使用者的手势信息，确定电器设备的控制指令；/n根据电器设备的控制指令，控制电器设备执行该控制指令，以实现电器设备与电器设备所属环境中使用者之间的人机交互。/n

【技术特征摘要】
1.一种人机交互方法，其特征在于，包括：
通过双目摄像头识别电器设备所属环境中使用者的手势信息；
根据电器设备所属环境中使用者的手势信息，确定电器设备的控制指令；
根据电器设备的控制指令，控制电器设备执行该控制指令，以实现电器设备与电器设备所属环境中使用者之间的人机交互。


2.根据权利要求1所述的人机交互方法，其特征在于，通过双目摄像头识别电器设备所属环境中使用者的手势信息，包括：
采用双目摄像头对电器设备所属环境中使用者进行定位，得到电器设备所属环境中使用者的人脸信息；
根据电器设备所属环境中使用者的人脸信息，采用双目摄像头识别电器设备所属环境中使用者的位置信息处使用者的手势信息。


3.根据权利要求2所述的人机交互方法，其特征在于，采用双目摄像头对电器设备所属环境中使用者进行定位，包括：
获取由双目摄像头采集到的电器设备所属环境中使用者的整体图像信息；
根据电器设备所属环境中使用者的整体图像信息，对电器设备所属环境中的使用者进行识别和定位，得到电器设备所属环境中使用者的位置信息；
根据电器设备所属环境中使用者的位置信息，进一步获取获取由双目摄像头采集到的电器设备所属环境中使用者的人脸图像；
根据电器设备所属环境中使用者的人脸图像，电器设备所属环境中使用者的位置信息处使用者的人脸信息。


4.根据权利要求2或3所述的人机交互方法，其特征在于，采用双目摄像头识别电器设备所属环境中使用者的位置信息处使用者的手势信息，包括：
根据电器设备所属环境中使用者的位置信息处使用者的人脸信息，确定电器设备所属环境中使用者的脸部是否面向电器设备；
若电器设备所属环境中使用者的脸部面向电器设备，则获取电器设备所属环境中使用者的肢体图像；
根据电器设备所属环境中使用者的肢体图像，确定电器设备所属环境中使用者的肢体信息，以将电器设备所属环境中使用者的肢体信息确定为电器设备所属环境中使用者的手势信息。


5.根据权利要求1至3中任一项所述的人机交互方法，其特征在于，手势信息，包括：手势的种类信息、手势的方向信息、和/或手势的深度信息。


6.根据权利要求1至3中任一项所述的人机交互方法，其特征在于，还包括：
对电器设备所属环境中使用者的手势信息、电器设备的控制指令、电器设备执行控制指令的执行过程、和/或电器设备执行控制指令的执行结果进行输出；其中，该输出，包括：在电器设备的显示屏上显示，发送至设定的客户端，和/或通过电器设备的语音系统播报。


7.一种人机交互装置，其特征在于，包括：
识别单元，用于通过双目摄像头识别电器设备所属环境中使用者的手势信息；
确定单元，用于根据电器设备所属环境中使用者的手势信息，确定电器设备的控制指令；
控制单元，用于根据电器设备的控制指令，控制电器设备执行该控制指...

【专利技术属性】
技术研发人员：刘康，王子，李保水，汪进，
申请(专利权)人：珠海格力电器股份有限公司，
类型：发明
国别省市：广东;44