【技术实现步骤摘要】
本公开涉及互联网直播领域，尤其涉及一种网络直播场景下的人脸融合方法和内容表达设备。
技术介绍
1、随着互联网技术的发展，越来越多的人喜欢通过观看直播来丰富自己的业余生活，直播在当代越发受到年轻人的欢迎。
2、在直播过程中，当直播主播的个人形象不符合主流审美，但是主播又想保留个人形象特色时，可以尝试对主播的个人形象进行修饰，以使主播在保留个人特色的情况下，又能提高外在形象，从而使直播间的受众范围更广。因此，如何修饰主播的个人形象是目前亟需解决的问题。
技术实现思路
1、为了解决上述技术问题，本公开提供了一种网络直播场景下的人脸融合方法和内容表达设备，用于修饰直播主播的个人形象。
2、本公开的技术方案如下：
3、第一方面，本公开提供一种网络直播场景下的人脸融合方法，包括：获取目标直播间的主播人脸图像数据；响应于用户操作，确定意向人脸数据；对主播人脸图像数据和意向人脸数据进行处理，得到主播人脸特征结果和意向人脸特征结果；对主播人脸特征结果和意向人脸特征结果进行融合，生成融合主播人脸图像；向直播视频生成设备发送融合主播人脸图像，以使直播视频生成设备基于融合主播人脸图像，生成直播视频流。
4、结合第一方面，另一种可能的实现方式中，对主播人脸图像数据和意向人脸数据进行处理，得到主播人脸特征结果和意向人脸特征结果，包括：基于人脸检测模型，确定主播人脸图像数据对应主播人脸检测图像，以及意向人脸数据对应的意向人脸检测图像；基于人脸识别模型，确定主播人脸
5、结合第一方面，另一种可能的实现方式中，基于人脸检测模型，确定主播人脸图像数据对应主播人脸检测图像，以及意向人脸数据对应的意向人脸检测图像，包括：利用人脸检测模型，分别对主播人脸图像数据和意向人脸数据进行关键点提取，得到主播人脸图像数据对应的主播人脸检测特征，以及意向人脸数据对应的意向人脸检测特征，主播人脸检测特征包括主播人脸关键点，意向人脸检测特征包括意向人脸关键点；分别将主播人脸关键点和意向人脸关键点映射到预设模板，得到主播人脸映射数据和意向人脸映射数据；分别对主播人脸映射数据和意向人脸映射数据进行空间归一化处理，得到主播人脸检测图像和意向人脸检测图像。
6、结合第一方面，另一种可能的实现方式中，基于人脸识别模型，确定主播人脸检测图像对应的主播人脸特征结果，以及意向人脸检测图像对应的意向人脸特征结果，包括：利用人脸识别模型分别对主播人脸检测图像和意向人脸检测图像进行脸部特征提取，得到主播人脸检测图像对应的主播人脸特征结果，以及意向人脸检测图像对应的意向人脸特征结果，主播人脸特征结果包括主播人脸特征向量，意向人脸特征结果包括意向人脸特征向量。
7、结合第一方面，另一种可能的实现方式中，将脸部特征提取结果和用户的图像数据进行融合，生成融合主播人脸图像，包括：确定主播人脸图像数据和意向人脸数据的融合权重；基于融合权重，对主播人脸特征结果和意向人脸特征结果进行调整，得到融合主播人脸图像。
8、第二方面，本公开提供一种内容表达设备，包括获取模块、确定模块、处理模块和融合模块。其中，获取模块，用于获取主播人脸图像数据；确定模块，用于响应于用户操作，确定意向人脸数据；处理模块，用于对主播人脸图像数据和意向人脸数据进行处理，得到主播人脸特征结果和意向人脸特征结果；融合模块，用于对主播人脸特征结果和意向人脸特征结果进行融合，生成融合主播人脸图像；发送模块，用于向直播视频生成设备发送融合主播人脸图像，以使直播视频生成设备基于融合主播人脸图像，生成直播视频流。
9、结合第二方面，另一种可能的实现方式中，处理模块包括检测单元和识别单元；检测单元，用于基于人脸检测模型，确定主播人脸图像数据对应主播人脸检测图像，以及意向人脸数据对应的意向人脸检测图像；识别单元，用于基于人脸识别模型，确定主播人脸检测图像对应的主播人脸特征结果，以及意向人脸检测图像对应的意向人脸特征结果。
10、结合第二方面，另一种可能的实现方式中，检测单元，还用于利用人脸检测模型，分别对主播人脸图像数据和意向人脸数据进行关键点提取，得到主播人脸图像数据对应的主播人脸检测特征，以及意向人脸数据对应的意向人脸检测特征，主播人脸检测特征包括主播人脸关键点，意向人脸检测特征包括意向人脸关键点；分别将主播人脸关键点和意向人脸关键点映射到预设模板，得到主播人脸映射数据和意向人脸映射数据；分别对主播人脸映射数据和意向人脸映射数据进行空间归一化处理，得到主播人脸检测图像和意向人脸检测图像。
11、结合第二方面，另一种可能的实现方式中，识别单元，还用于利用人脸识别模型分别对主播人脸检测图像和意向人脸检测图像进行脸部特征提取，得到主播人脸检测图像对应的主播人脸特征结果，以及意向人脸检测图像对应的意向人脸特征结果，主播人脸特征结果包括主播人脸特征向量，意向人脸特征结果包括意向人脸特征向量。
12、结合第二方面，另一种可能的实现方式中，融合模块包括权重确定单元和调整单元，权重确定单元，用于确定主播人脸图像数据和意向人脸数据的融合权重；调整单元，用于基于融合权重，对主播人脸特征结果和意向人脸特征结果进行调整，得到融合主播人脸图像。
13、第三方面，本公开提供一种电子设备，包括：存储器和处理器，存储器用于存储计算机程序；处理器用于在执行计算机程序时，使得电子设备实现如第一方面提供的任一项的网络直播场景下的人脸融合方法。
14、第四方面，本专利技术提供一种计算机可读存储介质，包括：计算机可读存储介质上存储计算机程序，计算机程序被处理器执行如第一方面提供的任一项的网络直播场景下的人脸融合方法。
15、第五方面，提供了一种包含计算机指令的计算机程序产品，当计算机程序产品在计算机上运行时，使得计算机执行如第一方面提供的任一项的网络直播场景下的人脸融合方法。
16、第六方面，提供了一种装置(例如，该装置可以是芯片系统)，该装置包括处理器，用于支持电子设备实现上述第一方面中所涉及的功能。在一种可能的设计中，该装置还包括存储器，该存储器，用于保存电子设备必要的程序指令和数据。该装置是芯片系统时，可以由芯片构成，也可以包含芯片和其他分立器件。
17、需要说明的是，上述计算机指令可以全部或者部分存储在第一计算机可读存储介质上。其中，第一计算机可读存储介质可以与数据处理装置的处理器封装在一起的，也可以与数据处理装置的处理器单独封装，本公开对此不作限定。
18、本公开中第二方面到第六方面的描述，可以参考第一方面的详细描述；并且，第二方面到第五方面的描述的有益效果，可以参考第一方面的有益效果分析，此处不再赘述。
19、在本公开中，上述数据处理装置的名字对设备或功能模块本身不构成限定，在实际实现中，这些设备或功能模块可以以其他名称出现。只要各个设备或功能模块的功能和本公开类似，属于本公开权利本文档来自技高网...
【技术保护点】
1.一种网络直播场景下的人脸融合方法，应用于直播系统中的内容表达设备，所述直播系统中还包括与所述内容表达设备连接的直播视频生成设备，其特征在于，包括：
2.根据权利要求1所述的网络直播场景下的人脸融合方法，其特征在于，所述对所述主播人脸图像数据和所述意向人脸数据进行处理，得到主播人脸特征结果和意向人脸特征结果，包括：
3.根据权利要求2所述的网络直播场景下的人脸融合方法，其特征在于，所述基于人脸检测模型，确定所述主播人脸图像数据对应主播人脸检测图像，以及所述意向人脸数据对应的意向人脸检测图像，包括：
4.根据权利要求2所述的网络直播场景下的人脸融合方法，其特征在于，所述基于人脸识别模型，确定所述主播人脸检测图像对应的所述主播人脸特征结果，以及所述意向人脸检测图像对应的所述意向人脸特征结果，包括：
5.根据权利要求1-4中任一项的网络直播场景下的人脸融合方法，其特征在于，所述对所述主播人脸特征结果和所述意向人脸特征结果进行融合，生成融合主播人脸图像，包括：
6.一种内容表达设备，其特征在于，包括：
7.根据权利
8.根据权利要求6所述内容表达设备，其特征在于，所述融合模块包括权重确定单元和调整单元；
9.一种电子设备，其特征在于，包括：存储器和处理器，所述存储器用于存储计算机程序；所述处理器用于在执行计算机程序时，使得所述电子设备实现权利要求1-5中任一项所述的网络直播场景下的人脸融合方法。
10.一种计算机可读存储介质，其特征在于，包括计算机指令；
...【技术特征摘要】
1.一种网络直播场景下的人脸融合方法，应用于直播系统中的内容表达设备，所述直播系统中还包括与所述内容表达设备连接的直播视频生成设备，其特征在于，包括：
2.根据权利要求1所述的网络直播场景下的人脸融合方法，其特征在于，所述对所述主播人脸图像数据和所述意向人脸数据进行处理，得到主播人脸特征结果和意向人脸特征结果，包括：
3.根据权利要求2所述的网络直播场景下的人脸融合方法，其特征在于，所述基于人脸检测模型，确定所述主播人脸图像数据对应主播人脸检测图像，以及所述意向人脸数据对应的意向人脸检测图像，包括：
4.根据权利要求2所述的网络直播场景下的人脸融合方法，其特征在于，所述基于人脸识别模型，确定所述主播人脸检测图像对应的所述主播人脸特征结果，以及所述意向人脸检测图像对应的所述意向人脸...
【专利技术属性】
技术研发人员：司马华鹏，马希望，汤毅平，唐翠翠，范宏伟，刘杰，胡逸，
申请(专利权)人：南京硅基智能科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。