虚拟画面的处理方法、装置、系统、电子设备及存储介质制造方法及图纸

本申请公开了一种虚拟画面的处理方法、装置、系统、电子设备及存储介质。该方法包括：生成虚拟画面，所述虚拟画面包括远程会话中一个或多个终端设备中每个终端设备对应的虚拟对象；接收所述一个或多个终端设备对应的语音数据；对所述语音数据进行语音分析，得到分析结果；基于所述分析结果，确定所述虚拟画面中的目标虚拟对象；基于所述目标虚拟对象，对所述虚拟画面进行预设调整，所述预设调整用于突出所述目标虚拟对象。本方法可以根据一个或多个终端设备的语音数据，对显示的虚拟画面进行控制，提高虚拟画面显示效果。

Processing method, device, system, electronic equipment and storage medium of virtual picture

【技术实现步骤摘要】
虚拟画面的处理方法、装置、系统、电子设备及存储介质
本申请涉及显示
，更具体地，涉及一种虚拟画面的处理方法、装置、系统、电子设备及存储介质。
技术介绍
由于通讯技术的发展，远程会议、远程协助、远程教育等远程会话场景已经越来越深入到人们的生活之中，但是传统远程会话通常是以语音通信的方式进行，或是利用摄像头实时采集会话参与者的画面进行视频通信，也可以是文字通信等。传统的远程会话通信方式单一，沉浸感较差。
技术实现思路
本申请实施例提出了一种虚拟画面的处理方法、装置、系统、电子设备及存储介质，能够利用增强现实/虚拟现实显示技术构建虚拟远程会话场景，提高远程会话场景中的视觉效果。第一方面，本申请实施例提供了一种虚拟画面的处理方法，方法包括：生成虚拟画面，虚拟画面包括远程会话中一个或多个终端设备中每个终端设备对应的虚拟对象；接收一个或多个终端设备对应的语音数据；对语音数据进行语音分析，得到分析结果；基于分析结果，确定虚拟画面中的目标虚拟对象；基于目标虚拟对象，对虚拟画面进行预设调整，预设调整用于突出目标虚拟对象。第二方面，本申请实施例提供了一种虚拟画面的处理装置，装置包括：画面生成模块、数据接收模块、数据分析模块、内容确定模块以及内容调整模块，其中，画面生成模块用于生成虚拟画面，虚拟画面包括远程会话中一个或多个终端设备中每个终端设备对应的虚拟对象；数据接收模块用于接收一个或多个终端设备对应的语音数据；数据分析模块用于对语音数据进行语音分析，得到分析结果；内容确定模块用于基于分析结果，确定虚拟画面中的目标虚拟对象；内容调整模块用于基于目标虚拟对象，对虚拟画面进行预设调整，预设调整用于突出目标虚拟对象。第三方面，本申请实施例提供了一种虚拟画面的处理系统，系统包括终端设备以及服务器，其中：终端设备用于生成虚拟画面并将虚拟画面进行显示，虚拟画面包括远程会话中的其他一个或多个终端设备中每个终端设备对应的虚拟对象；终端设备还用于采集语音数据，并上传语音数据至服务器；服务器用于同步远程会话中的多个终端设备的语音数据；终端设备还用于对同步的语音数据进行语音分析，得到分析结果，基于分析结果，确定虚拟画面中的目标虚拟对象，并基于目标虚拟对象，对虚拟画面进行预设调整，预设调整用于突出目标虚拟对象。第五方面，本申请实施例提供了一种电子设备，包括：一个或多个处理器；存储器；一个或多个应用程序，其中一个或多个应用程序被存储在存储器中并被配置为由一个或多个处理器执行，一个或多个程序配置用于执行上述第一方面提供的虚拟画面的处理方法。第六方面，本申请实施例提供了一种计算机可读取存储介质，计算机可读取存储介质中存储有程序代码，程序代码可被处理器调用执行上述第一方面提供的虚拟画面的处理方法。本申请实施例提供的方案，通过生成虚拟画面，虚拟画面包括远程会话中一个或多个终端设备中每个终端设备对应的虚拟对象，接收一个或多个终端设备对应的语音数据，对语音数据进行语音分析，得到分析结果，基于分析结果，确定虚拟画面中的目标虚拟对象，基于目标虚拟对象，对虚拟画面进行预设调整，预设调整用于突出目标虚拟对象，从而在增强现实/虚拟现实场景下，可根据远程会话中各个用户的声音信息，对显示的虚拟画面的进行操作处理，增强了远程会话对应的虚拟画面的显示效果。附图说明为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1示出了一种适用于本申请实施例的应用环境示意图。图2示出了另一种适用于本申请实施例的应用环境示意图。图3示出了根据本申请一个实施例的虚拟画面的处理方法流程图。图4示出了根据本申请实施例的一种显示效果示意图。图5示出了根据本申请实施例的另一种显示效果示意图。图6示出了根据本申请另一个实施例的虚拟画面的处理方法流程图。图7示出了根据本申请实施例的一种显示效果示意图。图8示出了根据本申请一个实施例的虚拟画面的处理装置的框图。图9是本申请实施例的用于执行根据本申请实施例的虚拟画面的处理方法的终端设备的框图。图10是本申请实施例的用于执行根据本申请实施例的虚拟画面的处理方法的服务器的框图。图11是本申请实施例的用于保存或者携带实现根据本申请实施例的虚拟画面的处理方法的程序代码的存储单元。具体实施方式为了使本
的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。下面对本申请实施例提供的虚拟画面的处理方法的应用场景进行介绍。请参见图1，示出了本申请实施例提供的虚拟场景的处理方法的应用场景的示意图，该应用场景包括交互系统10，该交互系统10可以应用于远程会话。该交互系统10包括：一个或多个终端设备100以及服务器200，其中，终端设备100与服务器200连接。在一些实施方式中，终端设备100通过网络与服务器200通信连接，从而终端设备100与服务器200之间可以进行数据交互。其中，终端设备100可以通过接入路由器所在网络，而通过路由器所在网络与服务器200之间的通信，也可以通过数据网络与服务器200之间进行通信。在一些实施方式中，终端设备100可以是头戴显示装置，也可以是手机、平板等移动设备。终端设备100为头戴显示装置时，头戴显示装置可以为一体式头戴显示装置。终端设备100也可以是与外接式/接入式头戴显示装置连接的手机等智能终端设备，即终端设备100可作为头戴显示装置的处理和存储设备，插入或者接入外接式头戴显示装置，在头戴显示装置中对虚拟内容进行显示。在远程会话中，终端设备100可用于对远程会话的虚拟会话场景进行显示，实现将虚拟会话场景的场景画面进行AR(AugmentedReality，增强现实技术)显示或者VR(VirtualReality，虚拟现实技术)显示，提升远程会话中场景画面的显示效果。当然，终端设备100也可以是电脑、平板电脑、电视等显示设备，终端设备100可以将虚拟会话场景对应的2D画面进行显示。在一些实施方式中，终端设备100可以采集远程会话中的信息数据(例如，采集用户的脸部信息、声音数据等)，以根据该信息数据构建三维模型。在另一些实施方式中，终端设备100也可以根据预先存储的脸部信息、声音数据、身体模型等信息数据进行建模，也可以结合预先存储的信息数据以及采集到的信息数据进行建模。例如，终端设备100可以实时采集人脸信息建立脸部模型，其中，人脸信息可以包括表情信息以及形态动作信息(如偏头、点头等)，然后再将脸部模型与预先设定的身体模型进行整合，节省了建模、渲染的时间的同时，也能实时获取用户的表情、形态动作。在一些实施方式中，终端设备100可以将上述采集的信息数据传输至服务器200或者其他终端设备100。在一些实施方式中，请参阅图2，交互系统100也还可以包括信息采集装置300，信息采集装置300用于采集上述信息数据(例如，采集用户的脸部信息、声音数据等)，并将采集的信息数据传输至终端设备100或者服务器200，在一些实施方式中，信息采集装置可包括摄像头、音频模块等，也可包括光传感器、声传感器等各类传感器。作为本文档来自技高网...

【技术保护点】
1.一种虚拟画面的处理方法，其特征在于，所述方法包括：生成虚拟画面，所述虚拟画面包括远程会话中一个或多个终端设备中每个终端设备对应的虚拟对象；接收所述一个或多个终端设备对应的语音数据；对所述语音数据进行语音分析，得到分析结果；基于所述分析结果，确定所述虚拟画面中的目标虚拟对象；基于所述目标虚拟对象，对所述虚拟画面进行预设调整，所述预设调整用于突出所述目标虚拟对象。

【技术特征摘要】
1.一种虚拟画面的处理方法，其特征在于，所述方法包括：生成虚拟画面，所述虚拟画面包括远程会话中一个或多个终端设备中每个终端设备对应的虚拟对象；接收所述一个或多个终端设备对应的语音数据；对所述语音数据进行语音分析，得到分析结果；基于所述分析结果，确定所述虚拟画面中的目标虚拟对象；基于所述目标虚拟对象，对所述虚拟画面进行预设调整，所述预设调整用于突出所述目标虚拟对象。2.根据权利要求1所述的方法，其特征在于，所述分析结果包括：每个终端设备对应的语音数据的语音参数，所述语音参数至少包括语音音量以及语音持续时间中的一种；所述基于所述分析结果，确定所述虚拟画面中的目标虚拟对象，包括：基于所述语音参数，确定兴趣终端设备，所述兴趣终端设备对应的语音数据的语音音量最大或者语音持续时间最长；确定所述虚拟画面中与所述兴趣终端设备对应的虚拟对象为目标虚拟对象。3.根据权利要求1所述的方法，其特征在于，所述方法还包括：当所述虚拟画面中不包含所述目标虚拟对象时，生成提示信息，所述提示信息用于提示改变目标设备的位置及姿态信息，所述目标设备为显示所述虚拟画面的终端设备。4.根据权利要求1所述的方法，其特征在于，所述分析结果包括：每个终端设备对应的语音数据的语音识别结果；所述基于所述分析结果，确定所述虚拟画面中的目标虚拟对象，包括：基于所述语音识别结果，获取所述语音数据中的关键词；确定所述虚拟画面中与所述关键词匹配的目标虚拟对象。5.根据权利要求1-4任一项所述的方法，其特征在于，在所述对所述语音数据进行语音分析，得到分析结果之前，包括：获取所述语音数据对应的终端设备的标识信息，并提取所述语音数据中的至少一个声纹信息；将所述至少一个声纹信息和预设声纹信息进行对比，所述预设声纹信息与所述标识信息对应；获取所述至少一个声纹信息中与所述预设声纹信息匹配的目标声纹信息，并从所述语音数据中提取与所述目标声纹信息匹配的目标语音数据；所述对所述语音数据进行语音分析，得到分析结果，包括：对所述目标语音数据进行语...

【专利技术属性】
技术研发人员：贺杰，戴景文，
申请(专利权)人：广东虚拟现实科技有限公司，
类型：发明
国别省市：广东,44