用户界面的交互方法技术

提供了一种包含处理器和用于提供用户界面的显示器的装置，其中所述处理器用于在所述用户界面的前景中提供至少一个第一交互元素，提供至少一个第二交互元素，所述第二交互元素布置在所述用户界面的背景中，接收用户与所述背景中的所述第二交互元素交互的指示，以及基于与所述第二交互元素的所述交互的所述指示触发由所述第二交互元素确定的功能。此外，定义了一种用于操作用户界面的方法。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术大体涉及用户交互，具体涉及一种用于实现与用户界面的交互的交互方法和装置。
技术介绍
当前的图形用户界面(UI)通常允许用户通过直接控制遵循二维隐喻的平面上布置的各个图形图标和视觉指示器与电子设备进行交互。三维(3D)用户界面表示三维中类似的图形图标和视觉指示器。然而，用户通常继续在平面上操作。基于图形用户界面的特定设置，用户可以提供指向各个图形图标或视觉指示器的输入以执行图形图标或视觉指示器表示的功能。例如，用户可通过触摸或点击图形图标或利用与图形图标关联的手势来直接控制屏幕上的图形图标。例如，用户可利用定点设备来点击或选择图形图标或视觉指示器，或者利用触敏设备来直接点击图形图标或视觉指示器。图形用户界面通常大小受限。因此，用户界面展示的元素和对应功能的数目有限。虽然3D用户界面可以利用增大的交互空间，但交互仍然基于在平(二维)面上进行交互这个理念，并且交互通常只与用户界面的活动部分或上下文相关。用户界面的其余部分无法直接由用户操作。
技术实现思路
鉴于上述内容，本专利技术的目标在于提升与用户界面的交互，尤其在于扩展用户界面提供的功能。前述目标和其它目标可以通过独立权利要求的特征来实现。其它实施形式在从属权利要求、具体说明和附图中显而易见。根据第一方面，提供了一种包括用于提供用户界面的显示器的装置。所述装置还包括处理器，所述处理器用于在所述用户界面的前景中提供至少一个第一交互元素；提供至少一个第二交互元素，所述第二交互元素布置在所述用户界面的背景中；接收用户与所述背景中的所述第二交互元素交互的指示；以及基于与所述第二交互元素的所述交互的所述指示触发由所述第二交互元素确定的功能。应理解，即使根据本专利技术的各方面和实施形式可以指所述用户界面的交互元素的图形用户界面和视觉表示，所述用户界面不是只限于交互元素的视觉表示并且此外或作为替代，还定义以任意组合的不同模态表示的交互元素，例如基于交互元素的声学或体感表示。例如，所述用户界面可包括交互元素的图形表示，这可以通过由触觉感知使用相同或其它交互元素的力或振动触觉反馈增强以增强呈现给操作所述用户界面的用户的信息。所述用户界面的交互元素，例如所述第一和第二交互元素，可以是所述用户界面的任意类型的功能部件，这可以在所述用户界面上表示并且这可以允许用户触发与所述交互元素关联的某些功能。交互元素可以是，例如，一个或多个图标、按钮或其它图形对象、声音或其它声学对象、由力表示的对象，振动或运动或其它触觉对象。用户可通过提供相应用户输入来与所述交互元素交互，所述用户输入可以用于识别所述用户界面内受影响的交互元素。基于所述用户输入和所述受影响的交互元素，处理器可生成交互指示并且可向所述用户界面或底层处理部件或引擎提供信息。通常而言，只有在所述用户界面的所述前景中提供的那些交互元素可以是活动的，使得所述用户的任何交互可以指向所述前景的交互元素。然而，所述用户与所述用户界面的所述背景中的交互元素，例如所述第二交互元素，的交互也可以被处理以生成所述用户与所述背景中的所述交互元素的所述交互的相应指示，以及触发所述背景中的所述交互元素确定的功能。这扩展了所述用户界面的所述功能，因为不仅所述用户界面的所述前景中的活动交互元素，而且所述用户界面的所述背景中的非活动交互元素均受所述用户交互的影响。因此，可用功能进一步通过所述背景中的所述交互元素扩展。优选地，所述用户界面可以是三维用户界面。由所述用户界面表示的任何模态的所述交互元素可以以链接到空间环境的实际方式表示，例如通过将交互元素可视化为三维对象，如使用3D声学在空间中对表示交互元素的声音进行渲染，以及提供局部触觉或触感反馈。除非另有说明，在本文中使用的术语“或”被理解为一个相容性合取词或析取词。因此，表达“A或B”意味着A或B或者A和B，这也可以表示为“A和/或B”。在根据所述第一方面的所述装置的第一可能实施方式中，响应于与所述第二交互元素的所述交互的完成触发所述功能。所述交互可由任意类型的用户输入定义，所述用户输入可包括由所述用户执行或发起的一个或多个动作，例如悬停于所述第二交互元素之上或拖动所述第二交互元素或执行与所述第二交互元素相关的相应手势。所述交互可通过完成所述一个或多个动作，例如通过点击所述第二交互元素，放置所述第二交互元素或完成所述手势来结束，以完成所述交互并触发相应功能。这具有以下优点：可以发起与所述第二交互元素的交互并且所述用户可具有额外时间来确定所述初始用户输入是否正确地链接到预期的交互元素。如果所述用户确定受影响的交互元素不正确，他或她可能中断或中止所述交互并发起指向所述预期的交互元素的新交互。在根据所述第一方面的所述装置的第二可能实施方式中，所述用户界面的所述前景是所述用户界面的活动上下文，所述用户界面的所述背景定义了所述用户界面的另一上下文。所述用户界面可以包括多个交互元素，例如所述第一交互元素和所述第二交互元素，这些交互元素可以布置在所述用户界面的所述前景或所述背景中或者至少部分在所述用户界面的所述前景中以及至少部分在所述用户界面的所述背景中。所述用户界面的所述前景定义了所述用户界面的所述活动的上下文或用户空间，这包括所述用户可以直接交互的那些交互元素。因此，所述用户界面的所述前景还可指所述用户界面的前面。所述用户界面可包括一个或多个上下文或用户空间中的信息的其它层次，每层均包括可以最初处于非活动状态的交互元素，即使用户可与这些交互元素进行交互。其它上下文或用户空间可指所述用户界面的所述背景。相应地，所述用户界面的所述背景中的交互元素可以是可感知的以提供与所述用户界面的功能相关的其它信息。然而，所述用户界面的所述背景中的交互元素还可被所述前景的交互元素覆盖，因此可能无法被感知或者可能只有部分可在所述用户界面上感知。这具有以下优点：所述用户界面表示的信息和交互性可以在多个层次上提供，使得在不影响所述用户界面的直观可用性的情况下在所述用户界面内提供最多的信息。在根据所述第一方面的所述装置的第三可能实施方式中，在所述用户与所述第二交互元素的所述交互期间，所述第一交互元素至少部分保持在所述前景中，所述第二交互元素至少部分保持在所述背景中。即使所述第二交互元素至少部分或全部保持在所述背景中以及所述第一交互元素至少部分或全部保持在所述前景中，可与所述第二交互元素进行交互。这具有以下优点：至少可以部分避免所述用户界面的所述第二交互元素的上下文转换，并且所述第一交互元素提供的功能可能在后续交互中仍然可用。在根据所述第一方面的所述装置的第四可能实施方式中，所述第一交互元素响应于与所述第一交互元素的第一交互，所述第二交互元素响应于与所述第二交互元素的第二交互，所述第二交互与所述第一交互同时执行。所述处理器可用于接收所述用户与所述前景中的所述第一交互元素的所述第一交互的第一指示，以及接收所述用户与所述背景中的所述第二交互元素的所述第二交互的第二指示。所述第二交互的所述第二指示可对应于所述用户与触发所述功能的所述第二交互元素的所述交互的所述指示。所述处理器可确定所述第一和第二交互的至少一部分是否同时执行。例如，所述用户可发起与所述第一交互元素的所述第一交互，并且在完成所述第一交互之前可发起与所述第二交互元素的所述第二交互本文档来自技高网...

【技术保护点】
一种装置，其特征在于，包括：显示器，用于提供用户界面(500)；以及处理器，用于在所述用户界面(500)的前景中提供至少一个第一交互元素(502)，提供至少一个第二交互元素(504)，所述第二交互元素(504)布置在所述用户界面(500)的背景中，接收用户与所述背景中的所述第二交互元素(504)交互的指示，以及基于与所述第二交互元素(504)的所述交互的所述指示触发由所述第二交互元素(504)确定的功能。

【技术特征摘要】
【国外来华专利技术】2014.10.02 EP EP14187509.61.一种装置，其特征在于，包括：显示器，用于提供用户界面(500)；以及处理器，用于在所述用户界面(500)的前景中提供至少一个第一交互元素(502)，提供至少一个第二交互元素(504)，所述第二交互元素(504)布置在所述用户界面(500)的背景中，接收用户与所述背景中的所述第二交互元素(504)交互的指示，以及基于与所述第二交互元素(504)的所述交互的所述指示触发由所述第二交互元素(504)确定的功能。2.根据权利要求1所述的装置，其特征在于，响应于与所述第二交互元素(504)的所述交互的完成触发所述功能。3.根据权利要求1或2所述的装置，其特征在于，所述用户界面(500)的所述前景是所述用户界面(500)的活动上下文，所述用户界面(500)的所述背景定义了所述用户界面(500)的另一上下文。4.根据前述权利要求之一所述的装置，其特征在于，在所述用户与所述第二交互元素(504)的所述交互期间，所述第一交互元素(502)至少部分保持在所述前景中，所述第二交互元素(504)至少部分保持在所述背景中。5.根据前述权利要求之一所述的装置，其特征在于，所述第一交互元素(502)响应于与所述第一交互元素(502)的第一交互，所述第二交互元素(504)响应于与所述第二交互元素(504)的第二交互，所述第二交互与所述第一交互同时执行。6.根据前述权利要求之一所述的装置，其特征在于，所述前景中的所述第一交互元素(502)包括句柄(506)。7.根据权利要求6所述的装置，其特征在于，所述处理器...

【专利技术属性】
技术研发人员：帕努·约翰逊，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：广东;44