System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 图像生成方法、装置、计算机设备和计算机可读存储介质制造方法及图纸_技高网

图像生成方法、装置、计算机设备和计算机可读存储介质制造方法及图纸

技术编号:40501059 阅读:18 留言:0更新日期:2024-02-26 19:28
本申请实施例公开了一种图像生成方法、装置、计算机设备和计算机可读存储介质,获取目标图像,对目标图像进行内容识别,得到目标图像中图像内容的描述文本信息;对描述文本信息进行文本分析处理,得到目标图像的内容组成特征,并确定内容组成特征对应的场景文本模板,场景文本模板下设置有文本类别;根据场景文本模板下的文本类别,对描述文本信息进行分类处理,得到场景文本模板中每个文本类别对应的类别描述文本信息;基于文本类别下的类别描述文本信息,生成目标图像对应的风格图像。本申请实施例根据目标图像的图像内容的描述文本信息,可以生成图像内容与目标图像相似,无需用户输入描述文本,提高图像的生成效率和生成效果。

【技术实现步骤摘要】

本申请涉及通信,具体涉及一种图像生成方法、装置、计算机设备和计算机可读存储介质


技术介绍

1、基于文本生成图像是目前人工智能内容创作(aigc)的一种热门形式,图文生成模型可以通过用户输入的描述性文本,生成出符合文本描述的高质量图图像,用户想要获得符合其需要的图像,需要尽可能详细地描述所需生成的图像的内容,如果用户漏输入,生成的图像则不符合要求,用户需要重新输入文本,因此该图像生成方式的效率低且生成的图像效果不好。


技术实现思路

1、本申请实施例提供一种图像生成方法、装置、计算机设备和计算机可读存储介质,可以提高图像的生成效率和生成效果。

2、本申请实施例提供的一种图像生成方法,包括:

3、获取目标图像,对所述目标图像进行内容识别,得到所述目标图像中图像内容的描述文本信息;

4、对所述描述文本信息进行文本分析处理,得到所述目标图像的内容组成特征,并确定所述内容组成特征对应的场景文本模板,所述场景文本模板下设置有文本类别;

5、根据所述场景文本模板下的文本类别,对所述描述文本信息进行分类处理,得到所述场景文本模板中每个文本类别对应的类别描述文本信息;

6、基于所述文本类别下的类别描述文本信息,生成所述目标图像对应的风格图像。

7、相应的,本申请实施例还提供的一种图像生成装置,包括:

8、识别单元,用于获取目标图像,对所述目标图像进行内容识别,得到所述目标图像中图像内容的描述文本信息;

9、分析单元,用于对所述描述文本信息进行文本分析处理,得到所述目标图像的内容组成特征,并确定所述内容组成特征对应的场景文本模板,所述场景文本模板下设置有文本类别;

10、分类单元,用于根据所述场景文本模板下的文本类别,对所述描述文本信息进行分类处理,得到所述场景文本模板中每个文本类别对应的类别描述文本信息;

11、生成单元,用于基于所述文本类别下的类别描述文本信息,生成所述目标图像对应的风格图像。

12、在一实施例中,所述识别单元,包括:

13、对象识别子单元,用于对所述目标图像进行对象识别,得到所述目标图像中每个对象的类别描述文本信息;

14、元素识别子单元,用于对所述目标图像进行元素检测,得到所述目标图像中元素对应的标签文本信息;

15、信息生成子单元,用于根据所述类别描述文本信息和所述标签文本信息,生成所述目标图像中图像内容的描述文本信息。

16、在一实施例中,所述分类单元,包括:

17、集合确定子单元,用于根据所述场景文本模板下的文本类别,确定每个文本类别对应的预设的描述文本集合;

18、筛选子单元,用于根据所述文本类别对应的描述文本集合,对所述描述文本信息进行筛选处理,得到每个文本类别下的类别描述文本信息。

19、在一实施例中,所述分类单元,包括:

20、分类处理子单元,用于根据所述场景文本模板对所述描述文本信息进行分类处理,得到每个文本类别下的候选类别描述文本信息;

21、获取子单元,用于获取所述候选类别描述文本信息的相似描述文本信息;

22、信息确定子单元,用于响应于针对所述候选类别描述文本和所述相似描述文本信息的选择操作,确定每个文本类别的类别描述文本信息。

23、在一实施例中,所述风格图像为图像笔记,所述类别描述文本信息包括对象描述文本信息和情景描述文本信息,所述生成单元,包括:

24、信息获取子单元,用于获取用户输入的目标文本信息;

25、载体子单元,用于根据所述情景描述文本信息,确定与所述目标图像中情景匹配的用于展示所述笔记文本信息的展示载体的载体描述文本信息;

26、图像生成子单元,用于根据所述对象描述文本信息、所述载体描述文本信息和所述目标文本信息生成所述风格图像,所述风格图像包含所述目标图像中对象对应的卡通形象,且所述目标文本信息显示在所述展示载体中。

27、在一实施例中,所述图像生成子单元,包括:

28、第一图像生成模块,用于根据所述的载体描述文本信息和所述目标文本信息生成场景图像,所述场景图像中包含有所述展示载体;

29、第二图像生成模块,用于根据所述对象描述文本信息生成所述目标图像中对象的卡通形象图像;

30、融合模块,用于将所述场景图像和所述卡通形象图像进行融合,得到所述风格图像。

31、在一实施例中,所述图像生成装置还包括:

32、文本确定单元,用于确定所述文本类别中的目标文本类别下的类别描述文本信息;

33、标注单元,用于根据所述目标文本类别下的类别描述文本信息对所述风格图像进行标注,得到标注后风格图像。

34、相应的,本申请实施例还提供的一种计算机设备,包括存储器和处理器;所述存储器存储有计算机程序,所述处理器用于运行所述存储器内的计算机程序,以执行本申请实施例提供的任一种图像生成方法。

35、相应的,本申请实施例还提供一种计算机可读存储介质,所述计算机可读存储介质用于存储计算机程序,所述计算机程序被处理器加载以执行本申请实施例提供的任一种图像生成方法。

36、本申请实施例通过获取目标图像,对目标图像进行内容识别,得到目标图像中图像内容的描述文本信息;对描述文本信息进行文本分析处理,得到目标图像的内容组成特征,并确定内容组成特征对应的场景文本模板,场景文本模板下设置有文本类别;根据场景文本模板下的文本类别,对描述文本信息进行分类处理,得到场景文本模板中每个文本类别对应的类别描述文本信息;基于文本类别下的类别描述文本信息,生成目标图像对应的风格图像。

37、本申请实施例根据目标图像的图像内容的描述文本信息,生成图像内容与目标图像相似的风格图像,无需用户输入描述文本信息,可以提高图像的生成效率和生成效果;除此之外,由于是基于描述文本信息生成图像,风格图像中图像内容的分布、大小以及比例等不受目标图像的影响,生成的图像更具趣味性。

本文档来自技高网...

【技术保护点】

1.一种图像生成方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述对所述目标图像进行内容识别,得到所述目标图像中图像内容的描述文本信息,包括:

3.根据权利要求1所述的方法,其特征在于,所述根据所述内容组成特征对应的文本模板包含的文本类别,对所述描述文本信息进行分类处理,得到所述文本模板中每个文本类别下的类别描述文本信息,包括:

4.根据权利要求1所述的方法,其特征在于,所述根据所述内容组成特征对应的场景文本模板包含的文本类别,对所述描述文本信息进行分类处理,得到所述场景文本模板中每个文本类别下的类别描述文本信息,包括:

5.根据权利要求1-4任一项所述的方法,其特征在于,所述风格图像为图像笔记,所述类别描述文本信息包括对象描述文本信息和情景描述文本信息,所述基于所述文本类别下的类别描述文本信息,生成所述目标图像对应的风格图像,包括:

6.根据权利要求5所述的方法,其特征在于,所述根据所述对象描述文本信息、所述载体描述文本信息和所述目标文本信息生成所述风格图像,包括:

7.根据权利要求1-4任一项所述的方法,其特征在于,所述基于所述文本类别下的类别描述文本信息,生成所述目标图像对应的风格图像之后,所述方法还包括:

8.一种图像生成装置,其特征在于,包括:

9.一种计算机设备,其特征在于,包括存储器和处理器;所述存储器存储有计算机程序,所述处理器用于运行所述存储器内的计算机程序,以执行权利要求1至7任一项所述的图像生成方法。

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质用于存储计算机程序,所述计算机程序被处理器加载,以执行权利要求1至7任一项所述的图像生成方法。

...

【技术特征摘要】

1.一种图像生成方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述对所述目标图像进行内容识别,得到所述目标图像中图像内容的描述文本信息,包括:

3.根据权利要求1所述的方法,其特征在于,所述根据所述内容组成特征对应的文本模板包含的文本类别,对所述描述文本信息进行分类处理,得到所述文本模板中每个文本类别下的类别描述文本信息,包括:

4.根据权利要求1所述的方法,其特征在于,所述根据所述内容组成特征对应的场景文本模板包含的文本类别,对所述描述文本信息进行分类处理,得到所述场景文本模板中每个文本类别下的类别描述文本信息,包括:

5.根据权利要求1-4任一项所述的方法,其特征在于,所述风格图像为图像笔记,所述类别描述文本信息包括对象描述文本信息和情景描述文本信息,所述基于所述文本类别下的类别描述...

【专利技术属性】
技术研发人员:王浩帆
申请(专利权)人:书行科技北京有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1