视频背景替换方法、装置和移动终端制造方法及图纸

本申请公开了一种视频背景替换方法、装置和移动终端，其中，该方法包括：获取与第一用户视频通话的第二用户的当前视频画面；在确定当前视频画面中存在除第二用户之外的第三用户时，获取第一用户所在场景的三维背景图像，并获取第一用户的深度图像；处理三维背景图像和第一用户的深度图像以提取第一用户在三维背景图像中的人物区域而获得人物区域图像；根据预设视频背景和人物区域图像对第一用户的视频背景进行替换。由此，在视频通话过程中，实现视频背景的自动替换，使得第三用户无法观看第一用户所在场景，避免第一用户个人隐私被泄露，提高了用户体验度。

Video background replacement method, device, and mobile terminal

The invention discloses a video background substitution method, a device and a mobile terminal, wherein, the method comprises: obtaining current video calls and video users first second users; in determining the presence of only second users outside of the third current users of video images, 3d background image to obtain the first user in the scene, the depth of the image and get the first user; depth image processing 3D background image and the first user to extract the background image in the region in the three-dimensional figure of the first user and character image; replace according to the preset video background and character image to a first user video background. Thus, during the process of video call, the automatic replacement of video background can be realized, so that third users can not see the scene of the first user, avoiding the first user's personal privacy being leaked and improving the user experience.

【技术实现步骤摘要】
视频背景替换方法、装置和移动终端
本申请涉及通信
，尤其涉及一种视频背景替换方法、装置和移动终端。
技术介绍
随着科技水平的发展，手机、平板电脑等终端的功能日益强大。例如，越来越多的终端配置了摄像头，用户可通过摄像头拍摄照片、录像、视频聊天等等。在用户通过摄像头与对方进行视频聊天的过程，视频画面中不仅会显示用户画面，还会显示用户所在环境的画面，由于用户所在场景中可能会涉及一些个人隐私，因此，在视频过程中，通常用户只希望对方看到自己所在环境的画面，即，不希望用户看到自己的视频背景，而不希望其他无关用户看到自己所在环境的画面。然而，在双方视频的过程中，当用户发现对方视频画面中有其他人时，用户需要手动关闭视频通话，对于用户来说，操作不方便，如果关闭不及时，视频画面可能已经被看到了。因此，如何避免视频时，用户的个人隐私信息被泄露，对于保护用户的隐私安全，改善用户体验，具有重要意义。
技术实现思路
本申请的目的旨在至少在一定程度上解决上述的技术问题之一。为此，本申请的第一个目的在于提出一种视频背景替换方法，该方法在视频通话过程中，实现了视频背景的自动替换，使得第三用户无法观看第一用户所在场景，避免了第一用户所在场景等个人隐私被泄露，提高了用户体验度。本申请的第二个目的在于提出一种视频背景替换装置。本申请的第三个目的在于提出一种计算机可读存储介质。本申请的第四个目的在于提出一种移动终端。本申请的第五个目的在于提出一种计算机程序。本申请第一方面实施例的视频背景替换方法，包括：获取与第一用户视频通话的第二用户的当前视频画面；在确定所述当前视频画面中存在除所述第二用户之外的第三用户时，获取所述第一用户所在场景的三维背景图像，并获取所述第一用户的深度图像；处理所述三维背景图像和所述第一用户的深度图像以提取所述第一用户在所述三维背景图像中的人物区域而获得人物区域图像；根据预设视频背景和所述人物区域图像对所述第一用户的视频背景进行替换。根据本申请实施例的视频背景替换方法，在第一用户与第二用户视频通话的过程中，在确定第二用户视频画面中存在第三用户时，获取第一用户所在场景的三维背景图像，并获取第一用户的深度图像，并处理三维背景图像和第一用户的深度图像以提取第一用户在三维背景图像中的人物区域而获得人物区域图像，以及根据预设视频背景和人物区域图像对第一用户的视频背景进行替换。由此，在视频通话过程中，实现了视频背景的自动替换，使得第三用户无法观看第一用户所在场景，避免了第一用户所在场景等个人隐私被泄露，提高了用户体验度。本申请第二方面实施例的视频背景替换装置，包括：第一获取模块，用于获取与第一用户视频通话的第二用户的当前视频画面；图像采集模块，用于在确定所述当前视频画面中存在除所述第二用户之外的第三用户时，获取所述第一用户所在场景的三维背景图像，并获取所述第一用户的深度图像；第一处理模块，用于处理所述三维背景图像和所述第一用户的深度图像以提取所述第一用户在所述三维背景图像中的人物区域而获得人物区域图像；替换模块，用于根据预设视频背景和所述人物区域图像对所述第一用户的视频背景进行替换。根据本申请实施例的视频背景替换装置，在第一用户与第二用户视频通话的过程中，在确定第二用户视频画面中存在第三用户时，获取第一用户所在场景的三维背景图像，并获取第一用户的深度图像，并处理三维背景图像和第一用户的深度图像以提取第一用户在三维背景图像中的人物区域而获得人物区域图像，以及根据预设视频背景和人物区域图像对第一用户的视频背景进行替换。由此，在视频通话过程中，实现了视频背景的自动替换，使得第三用户无法观看第一用户所在场景，避免了第一用户所在场景等个人隐私被泄露，提高了用户体验度。本申请第三方面实施例提供了一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行本申请第一方面实施例的视频背景替换方法。本申请第四方面实施例的移动终端，所述移动终端包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行本申请第一方面实施例的视频背景替换方法。根据本申请实施例的移动终端，在第一用户与第二用户视频通话的过程中，在确定第二用户视频画面中存在第三用户时，获取第一用户所在场景的三维背景图像，并获取第一用户的深度图像，并处理三维背景图像和第一用户的深度图像以提取第一用户在三维背景图像中的人物区域而获得人物区域图像，以及根据预设视频背景和人物区域图像对第一用户的视频背景进行替换。由此，在视频通话过程中，实现了视频背景的自动替换，使得第三用户无法观看第一用户所在场景，避免了第一用户所在场景等个人隐私被泄露，提高了用户体验度。本申请第五方面实施例提供了一种计算机程序产品，当所述计算机程序产品中的指令处理器执行时，执行本申请第一方面实施例的视频背景替换方法。本申请附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本申请的实践了解到。附图说明本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中，图1是根据本申请一个实施例的视频背景替换方法的流程图；图2是获取第一用户的深度图像的细化流程图；图3是解调结构光图像的各个像素对应的相位信息以得到第一用户的深度图像的细化流程图；图4(a)至图4(e)是根据本申请一个实施例的结构光测量的场景示意图；图5(a)和图5(b)是根据本申请一个实施例的结构光测量的场景示意图；图6是处理三维背景图像和第一用户的深度图像以提取第一用户在三维背景图像中的人物区域而获得人物区域图像的细化流程图；图7是根据本申请另一个实施例的视频背景替换方法的流程图；图8是根据本申请一个实施例的本申请实施例的视频背景替换装置的结构示意图；图9是根据本申请另一个实施例的本申请实施例的视频背景替换装置的结构示意图；图10是根据本申请又一个实施例的本申请实施例的视频背景替换装置的结构示意图；图11是根据本申请再一个实施例的本申请实施例的视频背景替换装置的结构示意图；图12是根据本申请一个实施例的图像处理电路的示意图。具体实施方式下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本申请，而不能理解为对本申请的限制。下面参考附图描述本申请实施例的视频背景替换方法、装置、移动终端和计算机可读存储介质。图1是根据本申请一个实施例的视频背景替换方法的流程图。该实施例的视频背景替换方法应用在终端中。其中，终端可以包括手机、平板电脑、智能穿戴式设备等具有各种操作系统的硬件设备。如图1所示，该视频背景替换方法包括以下步骤：S11，获取与第一用户视频通话的第二用户的当前视频画面。具体地，在第一用户与第二用户视频通话的过程中，第一用户的终端从视频显示界面中获取第二用户的当前视频画面。例如，第一用户为用户A，第二用户为用户B，在用户A与用户B视频通话的过程中，用户A的终端获取视频显示界面中用户B的当前视频画面。S12，在确定当前视频画面中存在除第二用户之外的第三用户时，获取第一用本文档来自技高网...

【技术保护点】
一种视频背景替换方法，其特征在于，所述方法包括以下步骤：获取与第一用户视频通话的第二用户的当前视频画面；在确定所述当前视频画面中存在除所述第二用户之外的第三用户时，获取所述第一用户所在场景的三维背景图像，并获取所述第一用户的深度图像；处理所述三维背景图像和所述第一用户的深度图像以提取所述第一用户在所述三维背景图像中的人物区域而获得人物区域图像；根据预设视频背景和所述人物区域图像对所述第一用户的视频背景进行替换。

【技术特征摘要】
1.一种视频背景替换方法，其特征在于，所述方法包括以下步骤：获取与第一用户视频通话的第二用户的当前视频画面；在确定所述当前视频画面中存在除所述第二用户之外的第三用户时，获取所述第一用户所在场景的三维背景图像，并获取所述第一用户的深度图像；处理所述三维背景图像和所述第一用户的深度图像以提取所述第一用户在所述三维背景图像中的人物区域而获得人物区域图像；根据预设视频背景和所述人物区域图像对所述第一用户的视频背景进行替换。2.如权利要求1所述的方法，其特征在于，所述获取所述第一用户的深度图像，包括：向所述第一用户投射结构光；拍摄经所述第一用户调制的结构光图像；以及解调所述结构光图像的各个像素对应的相位信息以得到所述第一用户的深度图像。3.如权利要求1所述的方法，其特征在于，所述处理所述三维背景图像和所述第一用户的深度图像以提取所述第一用户在所述三维背景图像中的人物区域而获得人物区域图像，包括：识别所述三维背景图像中的人脸区域；从所述第一用户的深度图像中获取与所述人脸区域对应的深度信息；根据所述人脸区域的深度信息确定所述人物区域的深度范围；根据所述人物区域的深度范围确定与所述人脸区域连接且落入所述深度范围内的人物区域以获得所述人物区域图像。4.如权利要求1所述的方法，其特征在于，所述方法还包括：获取所述第二用户的三维人脸模型，其中，所述三维人脸模型是由第二用户的终端通过向所述第二用户投射结构光而建立的；对所述当前视频画面进行人脸识别，以获取所述当前视频画面中的人脸区域；根据所述第二用户的三维人脸模型，判断所述当前视频画面中的人脸区域是否存在除所述第二用户的人脸区域之外的其他人脸区域；若判断出所述当前视频画面中的人脸区域存在除所述第二用户的人脸区域之外的其他人脸区域，则确定所述当前视频画面中存在除所述第二用户之外的第三用户，并执行所述获取所述第一用户所在场景的三维背景图像的步骤。5.如权利要求1-4任一项所述的方法，其特征在于，在所述根据预设视频背景和所述人物区域图像对所述第一用户的视频背景进行替换之后，所述方法还包括：当检测到所述当前视频画面中仅存在所述第二用户时，将所述第一用户的视频背景切换至原来的视频背景；或者，当检测到所述当前视频画面中仅存在所述第二用户时，显示是否将所述第一用户的视频背景切换至原来的视频背景恢复视频背景的提示信息，并在接收到所述第一用户的恢复视频背景的确认指令时，将所述第一用户的视频背景切换至原来的视频背景。6.一种视频背景替换装置，其特征在于，包括：第一获取模块，用于获取与第一用户视频通话的第二用户的当前视频画面；图像采集模块，用于在确定所述当前视频画面中存在除所述第二用户之外的第三用户时，...

【专利技术属性】
技术研发人员：张学勇，
申请(专利权)人：广东欧珀移动通信有限公司，
类型：发明
国别省市：广东,44