System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本公开涉及ai(artificial intelligence,人工智能)领域,具体为人工智能、数字人、增强现实等,可应用于视频和直播场景,尤其涉及一种用于数字人直播的封面生成方法、装置、设备及介质。
技术介绍
1、随着数字人直播平台的推广,越来越多的中小商家选择数字人直播能力,而直播封面作为直播内容的视觉呈现,扮演着至关重要的角色。直播封面不仅是吸引观众注意力的关键,还能传达直播主体、提升品牌形象、增加曝光率、促进观众留存以及影响观众预期。
2、因此,如何生成用于数字人直播的封面就显得尤为重要。
技术实现思路
1、本公开提供了一种用于数字人直播的封面生成方法、装置、设备及介质。
2、根据本公开的第一方面,提供了一种用于数字人直播的封面生成方法,包括:从数字人的直播视频中获取多个图像帧;根据所述多个图像帧中所述数字人的表情和/或姿态,从所述多个图像帧中确定用于生成直播封面的待处理图像;针对所述待处理图像中的至少一个图像区域,根据所述至少一个图像区域的感兴程度确定截取框位置;基于所述截取框位置对所述待处理图像进行图像截取,以得到直播封面图像。
3、根据本公开的第二方面,提供了一种用于数字人直播的封面生成装置,包括:获取模块,用于从数字人的直播视频中获取多个图像帧;第一确定模块,用于根据所述多个图像帧中所述数字人的表情和/或姿态,从所述多个图像帧中确定用于生成直播封面的待处理图像;第二确定模块,用于针对所述待处理图像中的至少一个图像区域,根据所述至少
4、根据本公开的第三方面,提供了一种电子设备,包括:
5、至少一个处理器;以及
6、与所述至少一个处理器通信连接的存储器;其中,
7、所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如第一方面所述的用于数字人直播的封面生成方法。
8、根据本公开第四方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,所述计算机指令用于使所述计算机执行如第一方面所述的用于数字人直播的封面生成方法。
9、根据本公开的第五方面,提供了一种计算机程序产品,包括计算机指令,所述计算机指令在被处理器执行时实现如第一方面所述的用于数字人直播的封面生成方法。
10、本公开提供的一种用于数字人直播的封面生成方法、装置、设备及介质,存在如下有益效果:
11、从数字人的直播视频中获取多个图像帧;根据多个图像帧中数字人的表情和/或姿态,从多个图像帧中确定用于生成直播封面的待处理图像;针对待处理图像中的至少一个图像区域,根据至少一个图像区域的感兴程度确定截取框位置;基于截取框位置对待处理图像进行图像截取,以得到直播封面图像。本公开可以实现充分利用数字人直播的动态特性,捕捉到数字人表情和/或姿态满足要求的瞬间,并根据图像区域的感兴趣程度来确定截取框位置,可以使得生成的封面图像聚焦于最重要的内容,避免了无关信息的干扰,最后通过截取图像,自动生成直播封面图像,有效减少直播封面生成过程中的人工干预,提升直播封面的生成效率,并可以实现直播封面的个性化定制,增强用户体验。
12、应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
本文档来自技高网...【技术保护点】
1.一种用于数字人直播的封面生成方法,所述方法包括:
2.根据权利要求1所述的方法,其中,所述根据所述多个图像帧中所述数字人的表情和/或姿态,从所述多个图像帧中确定用于生成直播封面的待处理图像,包括:
3.根据权利要求2所述的方法,其中,所述基于所述第一图像对应的第一得分和/或第二得分,从至少一个所述第一图像中确定所述待处理图像,包括:
4.根据权利要求2所述的方法,其中,所述基于所述第一图像对应的第一得分和/或第二得分,从至少一个所述第一图像中确定所述待处理图像,包括:
5.根据权利要求4所述的方法,其中,所述基于所述截取框位置对所述待处理图像进行图像截取,以得到直播封面图像,包括:
6.根据权利要求2所述的方法,其中,所述对所述第一图像中所述数字人的姿态进行识别,确定第二得分,包括:
7.根据权利要求6所述的方法,其中,所述根据所述数字人的肢体动作的运动协调性,确定所述第二子得分,包括:
8.根据权利要求7所述的方法,其中,所述姿态一致性是采用所述数字人在所述肢体动作下的姿态一致性得分进行评估
9.根据权利要求7所述的方法,其中,所述身体对称性是采用所述数字人在所述肢体动作下的对称性得分进行评估的,其中,所述数字人在所述肢体动作下的对称性得分的确定过程,包括:
10.根据权利要求7所述的方法,其中,所述身体平衡性是采用所述数字人在所述肢体动作下的平衡性得分进行评估的,其中,所述数字人在所述肢体动作下的平衡性得分的确定过程,包括:
11.根据权利要求1-10中任一项所述的方法,其中,所述针对所述待处理图像中的至少一个图像区域,根据所述至少一个图像区域的感兴程度确定截取框位置,包括:
12.一种用于数字人直播的封面生成装置,其中,所述装置包括:
13.根据权利要求12所述的装置,其中,所述第一确定模块,用于:
14.根据权利要求13所述的装置,其中,所述第一确定模块,用于:
15.根据权利要求13所述的装置,其中,所述第一确定模块,用于:
16.根据权利要求15所述的装置,其中,所述截取模块,用于:
17.根据权利要求13所述的装置,其中,所述第一确定模块,用于:
18.根据权利要求17所述的装置,其中,所述第一确定模块,用于:
19.根据权利要求18所述的装置,其中,所述姿态一致性是采用所述数字人在所述肢体动作下的姿态一致性得分进行评估的,所述第一确定模块,用于:
20.根据权利要求18所述的装置,其中,所述身体对称性是采用所述数字人在所述肢体动作下的对称性得分进行评估的,所述第一确定模块,用于:
21.根据权利要求18所述的装置,其中,所述身体平衡性是采用所述数字人在所述肢体动作下的平衡性得分进行评估的,所述第一确定模块,用于:
22.根据权利要求12-21中任一项所述的装置,其中,所述第二确定模块,用于:
23.一种电子设备,包括:
24.一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行权利要求1-11中任一项所述的方法。
25.一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现权利要求1-11中任一项所述的方法。
...【技术特征摘要】
1.一种用于数字人直播的封面生成方法,所述方法包括:
2.根据权利要求1所述的方法,其中,所述根据所述多个图像帧中所述数字人的表情和/或姿态,从所述多个图像帧中确定用于生成直播封面的待处理图像,包括:
3.根据权利要求2所述的方法,其中,所述基于所述第一图像对应的第一得分和/或第二得分,从至少一个所述第一图像中确定所述待处理图像,包括:
4.根据权利要求2所述的方法,其中,所述基于所述第一图像对应的第一得分和/或第二得分,从至少一个所述第一图像中确定所述待处理图像,包括:
5.根据权利要求4所述的方法,其中,所述基于所述截取框位置对所述待处理图像进行图像截取,以得到直播封面图像,包括:
6.根据权利要求2所述的方法,其中,所述对所述第一图像中所述数字人的姿态进行识别,确定第二得分,包括:
7.根据权利要求6所述的方法,其中,所述根据所述数字人的肢体动作的运动协调性,确定所述第二子得分,包括:
8.根据权利要求7所述的方法,其中,所述姿态一致性是采用所述数字人在所述肢体动作下的姿态一致性得分进行评估的,其中,所述数字人在所述肢体动作下的姿态一致性得分的确定过程,包括:
9.根据权利要求7所述的方法,其中,所述身体对称性是采用所述数字人在所述肢体动作下的对称性得分进行评估的,其中,所述数字人在所述肢体动作下的对称性得分的确定过程,包括:
10.根据权利要求7所述的方法,其中,所述身体平衡性是采用所述数字人在所述肢体动作下的平衡性得分进行评估的,其中,所述数字人在所述肢体动作下的平衡性得分的确定过程,包括:
11.根据权利要求1-10中任一项所述的方法,其...
【专利技术属性】
技术研发人员:王海宇,
申请(专利权)人:北京百度网讯科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。