System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 图像匹配文本的方法和装置制造方法及图纸_技高网

图像匹配文本的方法和装置制造方法及图纸

技术编号:44412372 阅读:1 留言:0更新日期:2025-02-25 10:26
本公开提供了一种图像匹配文本的方法和装置,涉及人工智能技术领域,尤其涉及计算机视觉、图像处理、自然语言处理、深度学习和大语言模型技术领域。该方法的一具体实施方式包括:从图像中提取图像特征向量,其中,图像特征向量包含图像的视觉信息和语义信息;将图像特征向量与文本语义向量库中的文本语义向量进行相似度匹配,得到相似度匹配结果;基于相似度匹配结果,选取与图像匹配的文本。

【技术实现步骤摘要】

本公开涉及人工智能,尤其涉及计算机视觉、图像处理、自然语言处理、深度学习和大语言模型。


技术介绍

1、在数字时代,随着社交媒体的普及,用户通过照片分享生活瞬间时,往往希望配上文本来表达照片的意境和情感。这种需求在摄影爱好者、旅游者和文化爱好者中尤为突出。然而,对于大多数用户来说,都难以自行为照片匹配出合适的诗句。

2、目前,传统的照片匹配文本的方法主要依赖于简单的标签或关键词匹配。例如,对照片进行分类,确定一组与照片匹配的标签。利用该组标签对应的关键词进行文本搜索,得到与照片匹配的文本。


技术实现思路

1、本公开实施例提出了一种图像匹配文本的方法、装置、设备、存储介质以及程序产品。

2、第一方面,本公开实施例提出了一种图像匹配文本的方法,包括:从图像中提取图像特征向量,其中,图像特征向量包含图像的视觉信息和语义信息;将图像特征向量与文本语义向量库中的文本语义向量进行相似度匹配,得到相似度匹配结果;基于相似度匹配结果,选取与图像匹配的文本。

3、第二方面,本公开实施例提出了一种图像匹配文本的装置,包括:提取模块,被配置成从图像中提取图像特征向量,其中,图像特征向量包含图像的视觉信息和语义信息;匹配模块,被配置成将图像特征向量与文本语义向量库中的文本语义向量进行相似度匹配,得到相似度匹配结果;选取模块,被配置成基于相似度匹配结果,选取与图像匹配的文本。

4、第三方面,本公开实施例提出了一种电子设备,包括:至少一个处理器;以及与至少一个处理器通信连接的存储器;其中,存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够执行如第一方面描述的方法。

5、第四方面,本公开实施例提出了一种存储有计算机指令的非瞬时计算机可读存储介质,计算机指令用于使计算机执行如第一方面描述的方法。

6、第五方面,本公开实施例提出了一种计算机程序产品,包括计算机程序,计算机程序在被处理器执行时实现如第一方面描述的方法。

7、本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。

本文档来自技高网...

【技术保护点】

1.一种图像匹配文本的方法,包括:

2.根据权利要求1所述的方法,其中,所述文本是诗词。

3.根据权利要求2所述的方法,其中,所述文本语义向量库是诗词语义向量库,所述诗词语义向量库中的诗词语义向量是对诗词原文、诗词译文、诗词注释中的至少一项进行语义向量化得到的。

4.根据权利要求3所述的方法,其中,所述从图像中提取图像特征向量,包括:

5.根据权利要求4所述的方法,其中,所述从所述图像中识别出所述视觉信息,以及对所述视觉信息进行语义理解,得到所述语义信息,包括:

6.根据权利要求3所述的方法,其中,所述诗词语义向量库中的诗词语义向量是利用自然语言处理模型对诗词原文、诗词译文、诗词注释中的至少一项进行语义向量化得到的。

7.根据权利要求5所述的方法,其中,所述方法还包括:

8.根据权利要求7所述的方法,其中,所述方法还包括:

9.根据权利要求8所述的方法,其中,所述调整所述提示词,包括:

10.一种图像匹配文本的装置,包括:

11.根据权利要求10所述的装置,其中,所述文本是诗词。

12.根据权利要求11所述的装置,其中,所述文本语义向量库是诗词语义向量库,所述诗词语义向量库中的诗词语义向量是对诗词原文、诗词译文、诗词注释中的至少一项进行语义向量化得到的。

13.根据权利要求12所述的装置,其中,所述提取模块包括:

14.根据权利要求13所述的装置,其中,所述分析子模块进一步被配置成:

15.根据权利要求12所述的装置,其中,所述诗词语义向量库中的诗词语义向量是利用自然语言处理模型对诗词原文、诗词译文、诗词注释中的至少一项进行语义向量化得到的。

16.根据权利要求14所述的装置,其中,所述装置还包括:

17.根据权利要求16所述的装置,其中,所述装置还包括:

18.根据权利要求17所述的装置,其中,所述调整模块进一步被配置成:

19.一种电子设备,包括:

20.一种存储有计算机指令的非瞬时计算机可读存储介质,所述计算机指令用于使所述计算机执行权利要求1-9中任一项所述的方法。

21.一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现根据权利要求1-9中任一项所述的方法。

...

【技术特征摘要】

1.一种图像匹配文本的方法,包括:

2.根据权利要求1所述的方法,其中,所述文本是诗词。

3.根据权利要求2所述的方法,其中,所述文本语义向量库是诗词语义向量库,所述诗词语义向量库中的诗词语义向量是对诗词原文、诗词译文、诗词注释中的至少一项进行语义向量化得到的。

4.根据权利要求3所述的方法,其中,所述从图像中提取图像特征向量,包括:

5.根据权利要求4所述的方法,其中,所述从所述图像中识别出所述视觉信息,以及对所述视觉信息进行语义理解,得到所述语义信息,包括:

6.根据权利要求3所述的方法,其中,所述诗词语义向量库中的诗词语义向量是利用自然语言处理模型对诗词原文、诗词译文、诗词注释中的至少一项进行语义向量化得到的。

7.根据权利要求5所述的方法,其中,所述方法还包括:

8.根据权利要求7所述的方法,其中,所述方法还包括:

9.根据权利要求8所述的方法,其中,所述调整所述提示词,包括:

10.一种图像匹配文本的装置,包括:

11.根据权利要求10所述的装置,其中,所述文本是诗词。

12...

【专利技术属性】
技术研发人员:李季唐安民
申请(专利权)人:北京度友信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1