【技术实现步骤摘要】
本专利技术整体涉及音频输出系统，包括但不限于用于对由音频输出设备输出的、在通信会话期间与参与者相关联的音频进行空间化，任选地，用于在一个或多个显示设备上显示视频会议用户界面，且具有一个或多个输入设备的系统。
技术介绍
1、音频输出设备(包括可穿戴音频输出设备，诸如头戴式耳机、耳塞和耳机)被广泛用于在通信会话期间向用户提供音频输出。
2、但是用于在通信会话(例如，多参与者视频会议通话)期间在可穿戴音频输出设备上播放音频的常规方法在可穿戴音频输出设备可输出音频的音频输出模式的类型方面受到限制。例如，常规使用的音频输出模式(诸如，立体声和单声道音频输出模式)相对于与音频输出设备相关的参照系提供音频，这可导致收听体验在沉浸感和真实感方面不如当使用空间音频输出模式输出音频时所提供的收听体验(例如，多个参与者语音全部被感知为来自空间中的一个重叠点)，这种空间音频输出模式模拟更真实的收听体验，其中音频好像来自单独的参照系(诸如，用户周围的物理环境)中的声源。此外，支持空间音频输出的可穿戴音频输出设备(其中模拟声源的定位与音频输出设备的移动无关)使得公共收听体验的真实感和沉浸感方面能够得以提升，同时还提供了非侵扰性的私人收听体验。将空间音频输出模式进一步应用于通信会话允许用户以更真实的方式进行通信，因为每个参与者将听起来如同处于单独位置处。此外，用于包括视觉组成部分(例如，视频通话)的通信会话的常规方法可能使参与者被置于整个用户界面中，但使他们相应的语音来自空间中的单个感知位置，这可使用户混淆。此外，常规方法花费更长的时间并且需要超
技术实现思路
1、因此，需要具有用于在通信会话和包括视觉组成部分的通信会话(例如，视频通话)期间对音频进行空间化的改进的方法和界面的音频输出设备和在一些实施方案中相关联的电子设备。此类方法和界面任选地补充或替换用于通信会话中的立体声和单声道音频输出模式的常规方法。此类方法和界面减少了来自用户的输入的数量、程度、和/或性质，并且产生更有效的人机界面。对于电池驱动的系统和设备，此类方法和界面节省了功率，并且增加了电池两次充电之间的间隔。
2、所公开的设备减少或消除了与用于与一组一个或多个可穿戴音频输出设备通信的电子设备的用户界面相关联的上述缺陷和其他问题。在一些实施方案中，电子设备是台式计算机。在一些实施方案中，电子设备是便携式的(例如，笔记本电脑、平板电脑或手持设备)。在一些实施方案中，电子设备是个人电子设备(例如，可穿戴电子设备，诸如手表)。在一些实施方案中，电子设备具有触控板。在一些实施方案中，电子设备具有触敏显示器(也称为“触摸屏”或“触摸屏显示器”)。在一些实施方案中，电子设备具有图形用户界面(gui)、一个或多个处理器、存储器和一个或多个模块、被存储在所述存储器中以用于执行多个功能的程序或指令集。在一些实施方案中，用户主要通过触笔和/或手指接触以及触敏表面上的手势来与gui进行交互。在一些实施方案中，这些功能任选地包括图像编辑、绘图、演示、文字处理、电子表格制作、玩游戏、接打电话、视频会议、收发电子邮件、即时消息通信、健身支持、数字摄影、数字视频录制、网页浏览、数字音乐/音频播放、记笔记和/或数字视频播放。用于执行这些功能的可执行指令任选地被包括在被配置用于由一个或多个处理器执行的非暂态计算机可读存储介质或其他计算机程序产品中。
3、根据一些实施方案，在与一个或多个显示设备、一个或多个输入设备和一组一个或多个可穿戴音频输出设备通信的电子设备处执行一种方法。该方法包括：经由该一个或多个显示设备显示包括通信会话中的多个参与者的相应动态视觉表示的用户界面，包括在用户界面中的第一位置处显示第一参与者的第一动态视觉表示，以及在用户界面中的第二位置处显示与第一参与者不同的第二参与者的第二动态视觉表示。该方法包括经由该组一个或多个可穿戴音频输出设备输出来自通信会话中的该多个参与者的音频。该方法包括输出来自第一参与者的第一音频。第一音频被调整以便独立于该组一个或多个可穿戴音频输出设备相对于通信会话的参照系的位置而将第一音频维持在相对于该参照系的第一模拟空间位置处。第一模拟空间位置对应于第一动态视觉表示在用户界面中的第一位置。该方法包括输出来自第二参与者的第二音频。第二音频被调整以便独立于该组一个或多个可穿戴音频输出设备相对于通信会话的参照系的位置而将第二音频维持在相对于该参照系的第二模拟空间位置处，其中第二模拟空间位置对应于第二动态视觉表示在用户界面中的第二位置。该方法包括经由该一个或多个输入设备接收选择第一参与者的第一动态视觉表示的输入。该方法包括：响应于接收到选择第一参与者的第一动态视觉表示的输入，在用户界面中与第一位置不同的第三位置处显示第一参与者的第一动态视觉表示，并且输出来自第一参与者的第一音频，以便将第一音频定位在相对于参照系的第三模拟空间位置处，该第三模拟空间位置对应于第一动态视觉表示在用户界面中的第三位置。第三模拟空间位置不同于第一模拟空间位置。该方法包括：响应于接收到选择第一参与者的第一动态视觉表示的输入，在用户界面中的第四位置处显示第二参与者的第二动态视觉表示，并且输出来自第二参与者的第二音频，以便将第二音频定位在相对于参照系的第四模拟空间位置处，该第四模拟空间位置对应于第二动态视觉表示在用户界面中的第四位置。
4、根据一些实施方案，在与和第二用户相关联的第二组一个或多个可穿戴音频输出设备通信的与第一用户相关联的第一组一个或多个可穿戴音频输出设备处执行一种方法。该方法包括：当第一组一个或多个可穿戴音频输出设备和第二组一个或多个可穿戴音频输出设备参与音频通信会话时，经由第一组一个或多个可穿戴音频输出设备输出来自第二组一个或多个可穿戴音频输出设备的相应音频，包括：当第一组一个或多个可穿戴音频输出设备相对于第二组一个或多个可穿戴音频输出设备移动时。该方法包括调整相应音频以便将相应音频定位在相对于第一组一个或多个可穿戴音频输出设备的模拟空间位置处，该模拟空间位置是基于第二组一个或多个可穿戴音频输出设备相对于第一组一个或多个可穿戴音频输出设备的相应位置来确定的。该方法包括基于第二组一个或多个可穿戴音频输出设备距第一组一个或多个可穿戴音频输出设备的距离来调整相应音频的除了模拟空间位置之外的输出属性。
5、根据一些实施方案，在与一个或多个显示生成部件、一个或多个输入设备和一组一个或多个音频输出设备通信的电子设备处执行一种方法。该方法包括：经由该一个或多个显示生成部件显示包括通信会话中的多个参与者的相应视觉表示的用户界面，包括在用户界面中的第一位置处显示第一参与者的第一视觉表示，以及在用户界面中的第二位置处显示与第一参与者不同的第二参与者的第二视觉表示。该方法包括：经由该组一个或多个可穿戴音频输出设备输出来自通信会话中的该多个参与者的音频，包括：根据确定该多个参与者包括第一数量的参与本文档来自技高网...
【技术保护点】
1.一种方法，包括：
2.根据权利要求1所述的方法，其中所述第四位置不同于所述用户界面中的所述第二位置，并且所述第四模拟空间位置不同于所述第二模拟空间位置。
3.根据权利要求2所述的方法，其中：
4.根据权利要求1至3中任一项所述的方法，其中：
5.根据权利要求1所述的方法，其中所述第三模拟空间位置比所述第一模拟空间位置和所述第二模拟空间位置更靠近所述一组一个或多个可穿戴音频输出设备的空间位置，并且所述方法包括：响应于接收到选择所述第一参与者的所述第一动态视觉表示的所述输入，相对于来自所述第二参与者的所述第二音频强调来自所述第一参与者的所述第一音频。
6.根据权利要求5所述的方法，其中响应于接收到选择所述第一参与者的所述第一动态视觉表示的所述输入，输出所述第一音频以便将所述第一音频定位在所述第三模拟空间位置处达第一预定义时间量，并且所述方法包括：在输出所述第一音频以便将所述第一音频定位在所述第三模拟空间位置处达所述第一预定义时间量之后，在比所述第三模拟空间位置更远离所述一组一个或多个可穿戴音频输出设备的所述空间位置的模拟
7.根据权利要求5至6中任一项所述的方法，其中选择所述第一参与者的所述第一动态视觉表示的所述输入包括对显示在所述用户界面中的所述电子设备的用户的表示的选择和将所述用户界面中的所述用户的所述表示移动到所述第一参与者的所述第一动态视觉表示的预定义距离内的拖动手势，并且所述方法包括：响应于接收到选择所述第一参与者的所述第一动态视觉表示的所述输入，显示所述第一参与者的所述第一动态视觉表示与所述用户的所述表示相关联的指示。
8.根据权利要求5至6中任一项所述的方法，包括：
9.根据权利要求1至3中任一项所述的方法，其中接收选择所述第一参与者的所述第一动态视觉表示的所述输入包括经由所述一个或多个输入设备检测在与所述第一动态视觉表示相对应的初始位置处的所述输入以及继续检测在所述初始位置处达至少第二预定义时间量的所述输入。
10.根据权利要求1至3中任一项所述的方法，其中接收选择所述第一参与者的所述第一动态视觉表示的所述输入包括经由所述一个或多个输入设备同时检测与第二输入点同时存在的第一输入点和所述第一输入点朝向或远离所述第二输入点的移动。
11.根据权利要求1至6中任一项所述的方法，其中选择所述第一参与者的所述第一动态视觉表示的所述输入包括当所述第一动态视觉表示显示在所述用户界面中的所述第一位置处时对所述第一动态视觉表示的选择和将所述第一动态视觉表示移动到所述用户界面中的所述第三位置的拖动手势。
12.根据权利要求1至3中任一项所述的方法，包括响应于检测到所述电子设备相对于所述电子设备所位于的物理环境的移动而滚动所述用户界面，其中当所述第一动态视觉表示显示在所述用户界面中的所述第一位置处时，所述第一参与者的所述第一动态视觉表示在所述用户界面的焦点区域之外，并且接收选择所述第一参与者的所述第一动态视觉表示的所述输入包括检测所述电子设备滚动所述用户界面、使得所述第一动态视觉表示在所述用户界面的所述焦点区域内而进行的移动。
13.根据权利要求1至3中任一项所述的方法，其中在相对于所述参照系的多个模拟空间位置处输出来自所述音频通信会话中的所述多个参与者的所述音频，并且所述方法包括：
14.根据权利要求13所述的方法，其中经由所述通信会话向所述多个参与者输出所述相应音频。
15.根据权利要求13所述的方法，包括：
16.根据权利要求13所述的方法，其中所述音频通信会话中的所述多个参与者中的任何两个参与者的相应模拟空间位置之间的距离小于所述相应音频的模拟空间位置与所述多个参与者中的任何相应参与者的模拟空间位置之间的距离。
17.根据权利要求1至3中任一项所述的方法，包括：
18.根据权利要求1至3中任一项所述的方法，其中所述电子设备与物理环境中的一个或多个相机通信，并且所述方法包括经由所述一个或多个显示设备在所述用户界面中显示所述物理环境在所述一个或多个相机的视场中的一部分的表示，其中在与所述物理环境中的相应物理位置相对应的所述一个或多个相机的所述视场的所述表示中的相应位置处显示所述通信会话中的所述多个参与者的所述相应动态视觉表示。
19.根据权利要求1至3中任一项所述的方法，包括：
20.根据权利要求1所述的方法，包括在所述用户界面中在与显示所述第一参与者的所述第一动态视觉表示和所述第二参与者的所述第二动态视觉表示的位置分开的所述用户界面的名单区域中显示所述通信会话中的第三参...
【技术特征摘要】
1.一种方法，包括：
2.根据权利要求1所述的方法，其中所述第四位置不同于所述用户界面中的所述第二位置，并且所述第四模拟空间位置不同于所述第二模拟空间位置。
3.根据权利要求2所述的方法，其中：
4.根据权利要求1至3中任一项所述的方法，其中：
5.根据权利要求1所述的方法，其中所述第三模拟空间位置比所述第一模拟空间位置和所述第二模拟空间位置更靠近所述一组一个或多个可穿戴音频输出设备的空间位置，并且所述方法包括：响应于接收到选择所述第一参与者的所述第一动态视觉表示的所述输入，相对于来自所述第二参与者的所述第二音频强调来自所述第一参与者的所述第一音频。
6.根据权利要求5所述的方法，其中响应于接收到选择所述第一参与者的所述第一动态视觉表示的所述输入，输出所述第一音频以便将所述第一音频定位在所述第三模拟空间位置处达第一预定义时间量，并且所述方法包括：在输出所述第一音频以便将所述第一音频定位在所述第三模拟空间位置处达所述第一预定义时间量之后，在比所述第三模拟空间位置更远离所述一组一个或多个可穿戴音频输出设备的所述空间位置的模拟空间位置处输出所述第一音频。
7.根据权利要求5至6中任一项所述的方法，其中选择所述第一参与者的所述第一动态视觉表示的所述输入包括对显示在所述用户界面中的所述电子设备的用户的表示的选择和将所述用户界面中的所述用户的所述表示移动到所述第一参与者的所述第一动态视觉表示的预定义距离内的拖动手势，并且所述方法包括：响应于接收到选择所述第一参与者的所述第一动态视觉表示的所述输入，显示所述第一参与者的所述第一动态视觉表示与所述用户的所述表示相关联的指示。
8.根据权利要求5至6中任一项所述的方法，包括：
9.根据权利要求1至3中任一项所述的方法，其中接收选择所述第一参与者的所述第一动态视觉表示的所述输入包括经由所述一个或多个输入设备检测在与所述第一动态视觉表示相对应的初始位置处的所述输入以及继续检测在所述初始位置处达至少第二预定义时间量的所述输入。
10.根据权利要求1至3中任一项所述的方法，其中接收选择所述第一参与者的所述第一动态视觉表示的所述输入包括经由所述一个或多个输入设备同时检测与第二输入点同时存在的第一输入点和所述第一输入点朝向或远离所述第二输入点的移动。
11.根据权利要求1至6中任一项所述的方法，其中选择所述第一参与者的所述第一动态视觉表示的所述输入包括当所述第一动态视觉表示显示在所述用户界面中的所述第一位置处时对所述第一动态视觉表示的选择和将所述第一动态视觉表示移动到所述用户界面中的所述第三位置的拖动手势。
12.根据权利要求1至3中任一项所述的方法，包括响应于检测到所述电子设备相对于所述电子设备所位于的物理环境的移动而滚动所述用户界面，其中当所述第一动态视觉表示显示在所述用户界面中的所述第一位置处时，所述第一参与者的所述第一动态视觉表示在所述用户界面的焦点区域之外，并且接收选择所述第一参与者的所述第一动态视觉表示的所述输入包括检测所述电子设备滚动所述用户界面、使得所述第一动态视觉表示在所述用户界面的所述焦点区域内而进行的移动。
13.根据权利要求1至3中任一项所述的方法，其中在相对于所述参照系的多个模拟空间位置处输出来自所述音频通信会话中的所述多个参与者的所述音频，并且所述方法包括：
14.根据权利要求13所述的方法，其中经由所述通信会话向所述多个参与者输出所述相应音频。
15.根据权利要求13所述的方法，包括：
16.根据权利要求13所述的方法，其中所述音频通信会话中的所述多个参与者中的任何两个参与者的相应模拟空间位置之间的距离小于所述相应音频的模拟空间位置与所述多个参与者中的任何相应参与者的模拟空间位置之间的距离。
17.根据权利要求1至3中任一项所述的方法，包括：
18.根据权利要求1至3中任一项所述的方法，其中所述电子设备与物理环境中的一个或多个相机通信，并且所述方法包括经由所述一个或多个显示设备在所述用户界面中显示所述物理环境在所述一个或多个相机的视场中的一部分的表示，其中在与所述物理环境中的相应物理位置相对应的所述一个或多个相机的所述视场的所述表示中的相应位置处显示所述通信会话中的所述多个参与者的所述相应动态视觉表示。
19.根据权利要求1...
【专利技术属性】
技术研发人员：D·A·萨通加，P·H·L·佩尔森，S·B·凯利，M·E·约翰逊，T·S·维尔马，P·D·卡拉威，J·W·常，D·K·布特，S·A·拉姆普拉沙德，P·米阿登，A·W·徐，K·科马罗夫，C·M·加里多，M·R·勒纳，C·C·霍伊特，
申请(专利权)人：苹果公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。