【技术实现步骤摘要】
【国外来华专利技术】
技术介绍
1、个体经常操作计算设备以在不同的上下文中执行语义上相似的任务。例如，个体可以使用第一计算机应用来参与动作序列以执行给定语义任务，诸如设置各种应用偏好、检索/查看可由第一计算机应用访问的特定数据、执行特定域内的操作序列(例如，3d建模、图形编辑、文字处理)等。相同个体稍后可以参与语义上相似但语法上不同的动作序列，以在不同的上下文中执行语义上等同的任务(例如，相同的语义任务)，诸如在使用第二计算机应用时。然而，个体可能不太熟悉第二计算机应用，并且因此可能无法执行语义任务。
技术实现思路
1、本文描述了用于自动生成和提供用于导航人机接口(hci)的指导以跨不同计算机应用执行语义上等同和/或语义上相似的计算任务的实施方式。更具体地但非排他地，本文描述了用于使得个体(通常称为“用户”)能够利用他们在一个上下文内执行的动作(例如，在执行语义任务时)的实施方式，以便生成用于在其他上下文中执行语义上等同或语义上相似的任务的指导。在各种实施方式中，捕获的动作可以被抽象为一般化的“动作嵌入空间”中的“动作嵌入”。该域不可知的动作嵌入可以抽象地表示“语义任务”，该“语义任务”可以使用相应的域模型转换成任何数量的域的动作空间。换句话说，“语义任务”是域不可知的更高阶的任务，它在特定域内发现作为域特定动作的序列/多个域特定动作的表达。
2、在一些实施方式中，一种方法可以使用一个或多个处理器来实现，并且可以包括：识别使用第一人机接口(hci)可操作的第一计算机应用的第一域；基于所识别
3、在各种实施方式中，域模型可以被训练为在第一计算机程序的动作空间与域不可知的动作嵌入空间之间转换。在各种实施方式中，域模型可以被训练为在第一计算机程序的动作空间与第二计算机程序的动作空间之间直接转换。
4、在各种实施方式中，第一hci可以采取图形用户界面的形式。在各种实施方式中，用于导航第一hci的指导可以包括覆盖gui的一个或多个视觉注释。在各种实施方式中，视觉注释中的一个或多个可以被渲染以引起对gui的一个或多个图形元素的注意。
5、在各种实施方式中，用于导航第一hci的指导可以包括一个或多个自然语言输出。在各种实施方式中，该方法还可以包括：获得传达语义任务的用户输入；以及基于语义任务识别动作嵌入。在各种实施方式中，用户输入可以是自然语言输入，并且该方法还可以包括：对自然语言输入执行自然语言处理(nlp)以生成表示语义任务的第一任务嵌入；以及确定第一任务嵌入与动作嵌入之间的相似性度量；其中，动作嵌入是基于相似性度量来处理的。
6、此外，一些实施方式包括一个或多个计算设备的一个或多个处理器，其中，一个或多个处理器可操作以执行存储在相关联的存储器中的指令，并且其中，指令被配置为使得执行任何前述方法。一些实施方式包括至少一个非暂时性计算机可读存储介质，其存储可由一个或多个处理器执行以执行任何前述方法的计算机指令。
7、应当理解，本文更详细描述的前述概念和附加概念的所有组合被设想为本文公开的主题的一部分。例如，出现在本公开结尾处的所要求保护的主题的所有组合被认为是本文公开的主题的一部分。
本文档来自技高网...【技术保护点】
1.一种使用一个或多个处理器实现的方法，包括：
2.根据权利要求1所述的方法，其中，域模型被训练为在第一计算机应用的动作空间与域不可知的动作嵌入空间之间转换。
3.根据权利要求1或2所述的方法，其中，域模型被训练为在第一计算机应用的动作空间与第二计算机应用的动作空间之间直接转换。
4.根据权利要求1至3中任一项所述的方法，其中，第一HCI包括图形用户界面。
5.根据权利要求4所述的方法，其中，用于导航第一HCI的指导包括覆盖GUI的一个或多个视觉注释。
6.根据权利要求5所述的方法，其中，视觉注释中的一个或多个被渲染以引起对GUI的一个或多个图形元素的注意。
7.根据权利要求1至6中任一项所述的方法，其中，用于导航第一HCI的指导包括一个或多个自然语言输出。
8.根据权利要求1至7中任一项所述的方法，还包括：
9.根据权利要求8所述的方法，其中，用户输入包括自然语言输入，并且所述方法还包括：
10.一种包括一个或多个处理器和存储指令的存储器的系统，响应于指令的执行，使得所述
11.根据权利要求10所述的系统，其中，域模型被训练为在第一计算机应用的动作空间与域不可知的动作嵌入空间之间转换。
12.根据权利要求10或11所述的系统，其中，域模型被训练为在第一计算机应用的动作空间与第二计算机应用的动作空间之间直接转换。
13.根据权利要求10至12中任一项所述的系统，其中，第一HCI包括图形用户界面。
14.根据权利要求13所述的系统，其中，用于导航第一HCI的指导包括覆盖GUI的一个或多个视觉注释。
15.根据权利要求14所述的系统，其中，视觉注释中的一个或多个被渲染以引起对GUI的一个或多个图形元素的注意。
16.根据权利要求10至15中任一项所述的系统，其中，用于导航第一HCI的指导包括一个或多个自然语言输出。
17.根据权利要求10至16中任一项所述的系统，还包括用于以下的指令：
18.根据权利要求17所述的系统，其中，用户输入包括自然语言输入，并且所述系统还包括用于以下的指令：
19.一种包括指令的非暂时性计算机可读介质，所述指令响应于处理器对所述指令的执行而使得处理器：
20.根据权利要求19所述的计算机可读介质，其中，域模型被训练为在第一计算机应用的动作空间与域不可知的动作嵌入空间之间转换。
...【技术特征摘要】
【国外来华专利技术】
1.一种使用一个或多个处理器实现的方法，包括：
2.根据权利要求1所述的方法，其中，域模型被训练为在第一计算机应用的动作空间与域不可知的动作嵌入空间之间转换。
3.根据权利要求1或2所述的方法，其中，域模型被训练为在第一计算机应用的动作空间与第二计算机应用的动作空间之间直接转换。
4.根据权利要求1至3中任一项所述的方法，其中，第一hci包括图形用户界面。
5.根据权利要求4所述的方法，其中，用于导航第一hci的指导包括覆盖gui的一个或多个视觉注释。
6.根据权利要求5所述的方法，其中，视觉注释中的一个或多个被渲染以引起对gui的一个或多个图形元素的注意。
7.根据权利要求1至6中任一项所述的方法，其中，用于导航第一hci的指导包括一个或多个自然语言输出。
8.根据权利要求1至7中任一项所述的方法，还包括：
9.根据权利要求8所述的方法，其中，用户输入包括自然语言输入，并且所述方法还包括：
10.一种包括一个或多个处理器和存储指令的存储器的系统，响应于指令的执行，使得所述一个或多个处理器：
11.根据权利要求10所述的系统，其中，域模型被训练为在第一计算...
【专利技术属性】
技术研发人员：D·安德烈，YA·马但，
申请(专利权)人：X开发有限责任公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。