设备交互控制方法、装置、计算机设备、存储介质制造方法及图纸

本申请涉及一种设备交互控制方法、装置、计算机设备、存储介质，该方法，通过获取用户操作设备时的人脸信息和操作数据，并根据人脸信息，确定用户情绪信息，再根据操作数据，确定操作流畅度信息。基于情绪维度和流畅度维度信息的确认，综合判断用户操作设备时的状态是否异常，若判定用户状态异常，则基于设备执行预设交互动作，通过与用户的交互，提高用户操作设备时的注意力，改善用户情绪，避免由于用户疲劳或情绪低下等其他原因造成误操作问题，进而提高设备操作结果可靠性。提高设备操作结果可靠性。提高设备操作结果可靠性。

【技术实现步骤摘要】
设备交互控制方法、装置、计算机设备、存储介质


[0001]本申请涉及交互
，特别是涉及一种设备交互控制方法、装置、计算机设备、存储介质。

技术介绍

[0002]医学影像设备的出现，为用户提供了更多可视化的组织器官图像，例如，超声成像设备，利用超声声束扫描人体，通过对反射信号的接收、处理，以获得体内器官图像。
[0003]申请人在实施过程中发现，目前的超声成像设备多聚焦于用户的操作工作流方面的改进，而忽略了超声成像设备使用需求量大的特点下所造成的疲劳操作的问题。

技术实现思路

[0004]基于此，有必要针对上述技术问题，提供一种能够有效避免用户因疲劳等原因进行设备异常操作的设备交互控制方法、装置、计算机设备、存储介质。
[0005]第一方面，本申请提供了一种设备交互控制方法，包括：
[0006]获取用户操作设备时的人脸信息和操作数据；
[0007]根据人脸信息，确定用户情绪信息；
[0008]根据操作数据，确定操作流畅度信息；
[0009]在根据用户情绪信息和操作流畅度信息判定用户状态异常的情况下，基于设备执行预设交互动作。
[0010]在其中一个实施例中，用户情绪信息包括情绪值，操作流畅度信息包括流畅度得分，根据用户情绪信息和操作流畅度信息判定用户状态异常的步骤，包括：
[0011]对情绪值和流畅度得分进行加权计算，确定总得分；
[0012]当总得分低于第一阈值时，则判定用户状态异常。
[0013]在其中一个实施例中，根据人脸信息，确定用户情绪信息，包括：
[0014]根据人脸信息和预设的情绪模型，确定情绪值。
[0015]在其中一个实施例中，根据人脸信息，确定用户情绪信息，还包括：
[0016]根据人脸信息和预设的情绪模型，确定各情绪值的置信度。
[0017]在其中一个实施例中，根据操作数据，确定操作流畅度信息，包括：
[0018]根据操作数据和预设的流畅度打分模型，确定流畅度得分。
[0019]在其中一个实施例中，用户情绪信息包括情绪值，基于设备执行预设交互动作，包括：
[0020]根据情绪值和交互动作确定模型，确定与情绪值对应的预设交互动作；其中，交互动作确定模型用于表征情绪值和预设交互动作之间的映射关系；
[0021]基于设备执行与情绪值对应的预设交互动作。
[0022]在其中一个实施例中，对情绪值和流畅度得分进行加权计算，确定总得分，包括：
[0023]在根据情绪值判定用户处于负面情绪的情况下，对情绪值和流畅度得分进行加权
计算，确定总得分。
[0024]在其中一个实施例中，基于设备执行预设交互动作，包括：
[0025]在设备处于空闲状态时，基于设备执行预设交互动作。
[0026]在其中一个实施例中，预设交互动作包括：语音提示、显示提示内容、展示预设游戏界面或升高设备中的至少一种。
[0027]在其中一个实施例中，用户情绪信息包括情绪值，方法还包括：
[0028]在检测到设备切换至工作状态或情绪值上升至第二阈值的情况下，停止执行预设交互动作。
[0029]第二方面，提供了一种设备交互控制装置，包括：
[0030]数据获取模块，用于获取用户操作设备时的人脸信息和操作数据；
[0031]情绪信息确定模块，用于根据人脸信息，确定用户情绪信息；
[0032]流畅度信息确定模块，用于根据操作数据，确定操作流畅度信息；
[0033]交互执行模块，用于在根据用户情绪信息和操作流畅度信息判定用户状态异常的情况下，基于设备执行预设交互动作。
[0034]第三方面，提供了一种计算机设备，包括存储器和处理器，存储器存储有计算机程序，处理器执行计算机程序时实现上述方法的步骤。
[0035]第四方面，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述方法的步骤。
[0036]上述设备交互控制方法、装置、计算机设备、存储介质，至少具有以下有益效果：
[0037]通过获取用户操作设备时的人脸信息和操作数据，并根据人脸信息，确定用户情绪信息，再根据操作数据，确定操作流畅度信息。基于情绪维度和流畅度维度信息的确认，综合判断用户操作设备时的状态是否异常，若判定用户状态异常，则基于设备执行预设交互动作，通过与用户的交互，提高用户操作设备时的注意力，改善用户情绪，避免由于用户疲劳或情绪低下等其他原因造成误操作问题，进而提高设备操作结果可靠性。
附图说明
[0038]图1为一个实施例中设备交互控制方法的应用环境图；
[0039]图2为一个实施例中设备交互控制方法的流程示意图之一；
[0040]图3为一个实施例中人脸信息的展示示意图；
[0041]图4为一个实施例中设备交互控制方法的流程示意图之二；
[0042]图5为一个实施例中设备交互控制方法的流程示意图之三；
[0043]图6为一个实施例中设备交互控制方法的流程示意图之四；
[0044]图7为一个实施例中设备交互控制方法的流程示意图之五；
[0045]图8为一个实施例中设备交互控制方法的流程示意图之六；
[0046]图9为一个实施例中设备交互控制装置的结构示意图；
[0047]图10为一个实施例中计算机设备的内部结构图。
具体实施方式
[0048]为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对
本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
[0049]超声成像设备由于其使用需求量大的特点，医生往往会长时间坐在设备前，精神状态会随着时间推移而变得疲倦，操作也变得迟钝不敏锐。此种情况下，容易发生操作失误，从而影响成像结果的可靠性。针对这类使用量大的设备，本申请提供了一种设备交互控制方法。
[0050]本申请实施例提供的设备交互控制方法，可以应用于如图1所示的应用环境中。其中，计算机设备102通过网络与服务器104进行通信。数据存储系统可以存储服务器104需要处理的数据。数据存储系统可以集成在服务器104上，也可以放在云上或其他网络服务器上。服务器104可以进行各模型的训练，将训练好的模型发送给计算机设备102，供计算机设备102使用。
[0051]计算机设备102能够实时获取设备前用户的人脸信息和用户操作设备时的操作数据，然后分别确定用户情绪信息和用户操作设备时的操作流畅度信息，根据二者，综合判断用户状态是否异常，若判定是，计算机设备102主动控制用户操作的设备执行预设交互动作，例如，在屏幕前发起提示或者以小游戏的形式与用户进行交互，提高用户的注意力，从而避免由疲劳等原因导致的误操作问题。其中，计算机设备102可以但不限于是各种医疗设备的控制器、个人计算机、笔记本电脑、智能手机、平板电脑、物本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种设备交互控制方法，其特征在于，所述方法包括：获取用户操作设备时的人脸信息和操作数据；根据所述人脸信息，确定用户情绪信息；根据所述操作数据，确定操作流畅度信息；在根据所述用户情绪信息和所述操作流畅度信息判定用户状态异常的情况下，基于所述设备执行预设交互动作。2.根据权利要求1所述的方法，其特征在于，所述用户情绪信息包括情绪值，所述操作流畅度信息包括流畅度得分，所述根据所述用户情绪信息和所述操作流畅度信息判定用户状态异常的步骤，包括：对所述情绪值和所述流畅度得分进行加权计算，确定总得分；当所述总得分低于第一阈值时，则判定用户状态异常。3.根据权利要求1所述的方法，其特征在于，所述根据所述人脸信息，确定用户情绪信息，包括：根据所述人脸信息和预设的情绪模型，确定情绪值。4.根据权利要求3所述的方法，其特征在于，所述根据所述人脸信息，确定用户情绪信息，还包括：根据所述人脸信息和预设的情绪模型，确定各所述情绪值的置信度。5.根据权利要求1
‑
4中任一项所述的方法，其特征在于，所述根据所述操作数据，确定操作流畅度信息，包括：根据所述操作数据和预设的流畅度打分模型，确定流畅度得分。6.根据权利要求1
‑
4中任一项所述的方法，其特征在于，所述用户情绪信息包括情绪值，所述基于所述设备执行预设交互动作，包括：根据所述情绪值和交互动作确定模型，确定与所述情绪值对应的预设交互动作；其中，所述交互动作确定模型用于表征所述情绪值和所述预设交互动作之间的映射关系；基于所述设备执行与所述情绪值对应的...

【专利技术属性】
技术研发人员：涂千涛，李宁，
申请(专利权)人：武汉联影医疗科技有限公司，
类型：发明
国别省市：