本申请提供了一种电子设备的显示方法、装置、电子设备和存储介质，电子设备包括显示屏，显示方法包括：获取显示屏显示界面中的显示图像；对显示图像进行图像识别得到至少一个图像元素，并对图像元素设置标签；获得图像元素中被选中的目标元素；将目标元素所对应的标签的内容输入大语言模型得到与目标元素相关的文本；在显示界面上展示文本的内容。本申请通过对显示图像进行图像识别得到至少一个图像元素，并对图像元素设置标签，接着获得用户选中的图像元素中的目标元素，然后将目标元素所对应的标签的内容输入大语言模型得到与目标元素相关的文本，并在显示界面上展示文本的内容，从而提高阅读的便利性。
【技术实现步骤摘要】
本申请涉及显示，尤其涉及电子设备的显示方法、装置、电子设备和存储介质。
技术介绍
1、电子墨水屏技术利用电泳技术实现画面的显示，这类屏幕的显示效果十分接近传统纸张，因此也被成为“电子纸”。电子墨水通常由大量微囊组成的薄膜制成，微囊中有带不同电荷的色素颗粒，初始状态下，色素颗粒悬浮在微囊中，当施加一定方向的电场后，相应的色素颗粒被推到顶部，微囊就会显示不同的颜色，而不同颜色的微囊组成了各种文本和图案。
2、近年来，随着科技发展，以智能手机、平板电脑、电子阅读器为代表的便携式电子设备也越来越普及。越来越多的读者喜欢在便携式电子设备（特别是电子阅读器、平板电脑和手机）上看文件、资讯或资料，因为电子墨水屏具有护眼功能和低蓝光辐射的优点，适合长时间阅读与学习。当读者在阅读文件、资讯或资料时，会对文件、资讯或资料中的人物、建筑、植物、动物等元素感兴趣，并且有进一步了解的期望。此时，读者可能需要主动退出阅读界面然后去搜索元素的相关内容，这无疑给读者带来了不便并浪费阅读时间。
技术实现思路
1、本申请提供了一种电子设备的显示方法、装置、电子设备和存储介质，以提高阅读的便利性。
2、第一方面，本申请提供了一种电子设备的显示方法，所述电子设备包括显示屏，所述显示方法包括：
3、获取所述显示屏显示界面中的显示图像；
4、对所述显示图像进行图像识别得到至少一个图像元素，并对所述图像元素设置标签；
5、获得所述图像元素中被选中的目标元素；
<
p>6、将所述目标元素所对应的标签的内容输入大语言模型得到与所述目标元素相关的文本；7、在所述显示界面上展示所述文本的内容。
8、在本申请的一些实施例中，所述获得所述图像元素中被选中的目标元素的步骤包括：
9、获取所述显示界面的光标的位置信息；
10、根据所述光标的位置信息获得与所述光标相重叠的所述图像元素，并作为被选中的目标元素。
11、在本申请的一些实施例中，所述根据所述光标的位置信息获得与所述光标相重叠的所述图像元素，并作为被选中的目标元素的步骤包括；
12、根据所述光标的位置信息获得与所述光标相重叠的所述图像元素；
13、判断与所述光标具有重叠部分的所述图像元素的个数是否大于1，如果是则将与所述光标具有最大面积的重叠部分的所述图像元素作为被选中的目标元素，如果否则将与所述光标相重叠的所述图像元素作为被选中的目标元素。
14、在本申请的一些实施例中，所述对所述显示图像进行图像识别得到至少一个图像元素的步骤，包括：
15、通过目标检测模型对所述显示图像进行检测得到至少一个图像元素区域以及所述图像元素区域的位置信息；
16、通过实例分割模型对所述图像元素区域进行识别得到掩码，所述掩码所对应的显示区域为所述图像元素。
17、在本申请的一些实施例中，所述显示方法还包括：
18、将所述文本与所述目标元素、所述目标元素对应的标签进行关联并存储在存储单元中。
19、在本申请的一些实施例中，所述标签包括类别名称，在所述将所述目标元素所对应的标签的内容输入大语言模型得到与所述目标元素相关的文本的步骤之前，所述显示方法还包括：
20、判断所述存储单元中是否存在所述目标元素所对应的标签的类别名称，如果是则从所述存储单元中获得与所述标签的类别名称相对应的文本，并在所述显示界面上展示与所述标签的类别名称相对应的文本的内容；如果否则执行下一步。
21、在本申请的一些实施例中，所述显示方法还包括：
22、获取所述目标元素所对应的裁切图片；
23、所述将所述文本与所述目标元素、所述目标元素对应的标签进行关联并存储在存储单元中的步骤，包括：
24、将所述文本与所述目标元素、所述裁切图片、所述目标元素对应的标签进行关联并存储在存储单元中；
25、所述判断所述存储单元中是否存在所述目标元素所对应的标签的类别名称，如果是则从所述存储单元中获得与所述标签的类别名称相对应的文本，并在所述显示界面上展示与所述标签的类别名称相对应的文本的内容；如果否则执行下一步的步骤，包括；
26、判断所述存储单元中是否存在所述目标元素所对应的标签的类别名称，如果是则从所述存储单元中获得与所述标签的类别名称相对应的文本以及裁切图片，并在所述显示界面上展示与所述标签的类别名称相对应的文本的内容以及裁切图片；如果否则执行下一步。
27、在本申请的一些实施例中，所述在所述显示界面上展示所述文本的内容的步骤，包括：
28、将所述文本的内容以文字的形式在所述显示界面上展示。
29、在本申请的一些实施例中，所述在所述显示界面上展示所述文本的内容的步骤，包括：
30、将所述文本的内容转换为语音，在所述显示界面上播放所述语音。
31、第二方面，本申请还提供了一种电子设备的显示装置，所述电子设备包括显示屏，所述显示装置包括：
32、获取模块，所述获取模块用于获取所述显示屏显示界面中的显示图像；
33、识别模块，所述识别模块用于对所述显示图像进行图像识别得到至少一个图像元素，并对所述图像元素设置标签；
34、目标模块，所述目标模块用于获得所述图像元素中被选中的目标元素；
35、模型模块，所述模型模块用于将所述目标元素所对应的标签的内容输入大语言模型得到与所述目标元素相关的文本；
36、展示模块，所述展示模块用于在所述显示界面上展示所述文本的内容。
37、第三方面，本申请还提供了一种电子设备，包括：
38、一个或多个处理器；
39、存储器，用于存储一个或多个程序；
40、当所述一个或多个程序被所述一个或多个处理器执行，使得所述电子设备实现如第一方面任一所述的显示方法。
41、第四方面，本申请还提供了计算机可读存储介质，所述存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面任一所述的显示方法。
42、本申请提供了一种电子设备的显示方法、装置、电子设备和存储介质，所述电子设备包括显示屏，所述显示方法包括：获取所述显示屏显示界面中的显示图像；对所述显示图像进行图像识别得到至少一个图像元素，并对所述图像元素设置标签；获得所述图像元素中被选中的目标元素；将所述目标元素所对应的标签的内容输入大语言模型得到与所述目标元素相关的文本；在所述显示界面上展示所述文本的内容。本申请通过对所述显示图像进行图像识别得到至少一个图像元素，并对所述图像元素设置标签，接着获得用户选中的所述图像元素中的目标元素，然后将所述目标元素所对应的标签的内容输入大语言模型得到与所述目标元素相关的文本，并在所述显示界面上展示所述文本的内容，因此用户不需要退出阅读界面即可得到目标元素的相关内容，从而提高阅读的便利本文档来自技高网
...
【技术保护点】
1.一种电子设备的显示方法，所述电子设备包括显示屏，其特征在于，包括：
2.根据权利要求1所述的显示方法，其特征在于，所述获得所述图像元素中被选中的目标元素的步骤包括：
3.根据权利要求2所述的显示方法，其特征在于，所述根据所述光标的位置信息获得与所述光标相重叠的所述图像元素，并作为被选中的目标元素的步骤包括；
4.根据权利要求1所述的显示方法，其特征在于，所述对所述显示图像进行图像识别得到至少一个图像元素的步骤，包括：
5.根据权利要求1所述的显示方法，其特征在于，所述显示方法还包括：
6.根据权利要求5所述的显示方法，其特征在于，所述标签包括类别名称，在所述将所述目标元素所对应的标签的内容输入大语言模型得到与所述目标元素相关的文本的步骤之前，所述显示方法还包括：
7.根据权利要求6所述的显示方法，其特征在于，所述显示方法还包括：
8.根据权利要求1所述的显示方法，其特征在于，所述在所述显示界面上展示所述文本的内容的步骤，包括：
9.根据权利要求1所述的显示方法，其特征在于，所述在所述显示界面上展示所述文本的内容的步骤，包括：
10.一种电子设备的显示装置，所述电子设备包括显示屏，其特征在于，包括：
11.一种电子设备，其特征在于，包括：
12.一种计算机可读存储介质，所述存储介质上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-9任一所述的显示方法。
...
【技术特征摘要】
1.一种电子设备的显示方法，所述电子设备包括显示屏，其特征在于，包括：
2.根据权利要求1所述的显示方法，其特征在于，所述获得所述图像元素中被选中的目标元素的步骤包括：
3.根据权利要求2所述的显示方法，其特征在于，所述根据所述光标的位置信息获得与所述光标相重叠的所述图像元素，并作为被选中的目标元素的步骤包括；
4.根据权利要求1所述的显示方法，其特征在于，所述对所述显示图像进行图像识别得到至少一个图像元素的步骤，包括：
5.根据权利要求1所述的显示方法，其特征在于，所述显示方法还包括：
6.根据权利要求5所述的显示方法，其特征在于，所述标签包括类别名称，在所述将所述目标元素所对应的标签的内容输入大...
【专利技术属性】
技术研发人员：黄昆彬，
申请(专利权)人：广州文石信息科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。