2D与3D图像协同标注的方法、装置、电子设备及存储介质制造方法及图纸

技术编号:36540577 阅读:13 留言:0更新日期:2023-02-01 16:38
本发明专利技术涉及一种2D与3D图像协同标注的方法、装置、电子设备及存储介质。本发明专利技术所述的一种2D与3D图像协同标注的方法包括:获取待标注的2D图像对应的3D图像;将所述2D图像和所述3D图像分别显示在2D视窗和3D视窗;获取用户对所述2D图像的标注指令,所述标注指令指示用户对所述2D图像添加了第一标注信息;将所述2D图像的第一标注信息传递到3D视窗,并根据所述2D图像的第一标注信息,在所述3D图像上的相同位置生成对应的3D形式的第二标注信息;获取用户的确认标注指令,保存当前的所述2D图像的标注数据。本发明专利技术所述的一种2D与3D图像协同标注的方法,有效提高了图像标注的准确率和速度。有效提高了图像标注的准确率和速度。有效提高了图像标注的准确率和速度。

【技术实现步骤摘要】
2D与3D图像协同标注的方法、装置、电子设备及存储介质


[0001]本专利技术涉及图像处理
,特别是涉及一种2D与3D图像协同标注的方法、装置、电子设备及存储介质。

技术介绍

[0002]瑕疵识别是图像领域一个重要的分支,广泛应用于工业制造品的后续品控流程中,用于识别工件上的划痕、凹坑、脏污等瑕疵。早期的人工检验瑕疵存在速度慢、劳动强度大,易受主观因素影响,缺乏一致性等问题,严重降低了工业生产的自动化程度。因此,现有技术多利用神经网络对采集到的产品图像进行自动瑕疵识别。
[0003]而神经网络的识别准确率,严重依赖与前期训练数据集中,人工标注的瑕疵是否准确。
[0004]现有的图像瑕疵标注包括2D图像标注和3D图像标注。现有技术主要有以下几个方面的不足:
[0005]1、数据成像质量决定计算机视觉处理的效果下限,仅靠2D的图像信息难以胜任复杂视觉处理任务。
[0006]2、3D数据是一种新兴的数据收集方式,他在传统的2D图像基础上,进一步收集目标高低起伏的信息,这对精细的视觉任务非常有用。但传统的3D数据标注方式之一是2D、3D分开标注,带来标注位置不对齐、标注时间翻倍的问题。
[0007]3、另一种3D数据标注方式是在2D标注,3D数据仅仅起到观察的作用,并且标注不在两边同步,这样的3D信息仅靠人眼和2D对齐,导致标注效率低下。

技术实现思路

[0008]基于此,本专利技术的目的在于,提供一种2D与3D图像协同标注的方法、装置、电子设备及存储介质,将2D图像的标注同步显示在3D图像中,便于及时查看2D标注是否准确,有效提高了图像标注的准确率和速度。
[0009]第一方面,本专利技术提供一种2D与3D图像协同标注的方法,包括以下步骤:
[0010]获取待标注的2D图像对应的3D图像;
[0011]将所述2D图像和所述3D图像分别显示在2D视窗和3D视窗;
[0012]获取用户对所述2D图像的标注指令,所述标注指令指示用户对所述2D图像添加了第一标注信息;所述第一标注信息至少包括以下一项:标注的位置、标注的形状、标注的颜色;
[0013]将所述2D图像的第一标注信息传递到3D视窗,并根据所述2D图像的第一标注信息,在所述3D图像上的相同位置生成对应的3D形式的第二标注信息;
[0014]获取用户的确认标注指令,保存当前的所述2D图像的标注数据。
[0015]进一步地,将所述2D图像和所述3D图像分别同时显示在2D视窗和3D视窗之前,还包括:
[0016]对所述2D图像和所述3D图像进行数据对齐处理。
[0017]进一步地,对所述2D图像和所述3D图像进行数据对齐处理,包括:
[0018]获取所述2D图像和所述3D图像中工件的坐标位置;
[0019]判断所述2D图像和所述3D图像中相同的坐标位置是否对应同一区域;
[0020]当所述2D图像和所述3D图像中相同的坐标位置对应不同区域,则通过计算偏移位置,移动所述D图像和/或所述3D图像,使得所述2D图像和所述3D图像中相同的坐标位置对应同一区域。
[0021]进一步地,获取待标注的2D图像对应的3D图像,包括:
[0022]获取待标注的2D图像的文件名称;
[0023]在所述待标注的2D图像所在文件夹中,检索与所述待标注的2D图像的文件名称相同的3D图像。
[0024]进一步地,获取用户的确认标注指令,保存当前的所述2D图像的标注数据,包括:
[0025]获取确认标注指令所对应的标注数据,所述标注数据至少包括以下一项:标注轮廓边缘点位置、标注的类别;
[0026]通过通用格式json文件保存所述标注数据,并将所述json文件保存到2D图像所在文件夹中。
[0027]进一步地,还包括以下步骤:
[0028]获取用户对2D图像的查看指令;
[0029]获取所述待查看的2D图像对应的3D图像和对应的json文件;
[0030]根据所述查看指令将所述2D图像和所述3D图像分别同时显示在2D视窗和3D视窗;
[0031]根据所述json文件保存的标注数据,获取标注的形状和位置,将所述标注的形状和位置渲染在所述2D视窗的所述2D图像中;
[0032]将所述标注数据传递给3D视窗,将所述标注的形状和位置渲染在所述3D视窗的所述3D图像中。
[0033]进一步地,还包括以下步骤:
[0034]获取用户对于所述3D图像的图像展示指令,所述图像展示指令至少包括以下一种:旋转、翻转、缩放;
[0035]根据所述图像展示指令对所述3D图像进行对应的展示处理。
[0036]第二方面,本专利技术还提供一种2D与3D图像协同标注的装置,包括:
[0037]3D图像获取模块,用于获取待标注的2D图像对应的3D图像;
[0038]图像显示模块,用于将所述2D图像和所述3D图像分别显示在2D视窗和3D视窗;
[0039]标注指令获取模块,用于获取用户对所述2D图像的标注指令,所述标注指令指示用户对所述2D图像添加了第一标注信息;所述第一标注信息至少包括以下一项:标注的位置、标注的形状、标注的颜色;
[0040]标注信息传递模块,用于将所述2D图像的第一标注信息传递到3D视窗,并根据所述2D图像的第一标注信息,在所述3D图像上的相同位置生成对应的3D形式的第二标注信息;
[0041]标注数据保存模块,用于获取用户的确认标注指令,保存当前的所述2D图像的标注数据。
[0042]第三方面,本专利技术还提供一种智能设备,其特征在于,包括:
[0043]至少一个存储器以及至少一个处理器;
[0044]所述存储器,用于存储一个或多个程序;
[0045]当所述一个或多个程序被所述至少一个处理器执行,使得所述至少一个处理器实现如本专利技术第一方面任一所述的一种2D与3D图像协同标注的方法的步骤。
[0046]第四方面,本专利技术还提供一种计算机可读存储介质,其特征在于:
[0047]所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如本专利技术第一方面任一所述的一种2D与3D图像协同标注的方法的步骤。
[0048]本专利技术提供的一种2D与3D图像协同标注的方法、装置、电子设备及存储介质,在2D图像上标注,3D图像上同步显示标注信息,其过程可以概况2D<=>3D,传统的2D、3D数据标注是人眼观察3D数据后,调整2D的标注,其过程可以概况2D

>3D

>2D...。与传统的2D、3D数据标注相比,本专利技术的提供的一种2D与3D图像协同标注的方法,标注更快、标注更准确。
[0049]为了更好地理解和实施,下面结合附图详细说明本专利技术。
附图说明
[0050]图1为本专利技术提供的一种2本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种2D与3D图像协同标注的方法,其特征在于,包括以下步骤:获取待标注的2D图像对应的3D图像;将所述2D图像和所述3D图像分别显示在2D视窗和3D视窗;获取用户对所述2D图像的标注指令,所述标注指令指示用户对所述2D图像添加了第一标注信息;所述第一标注信息至少包括以下一项:标注的位置、标注的形状、标注的颜色;将所述2D图像的第一标注信息传递到3D视窗,并根据所述2D图像的第一标注信息,在所述3D图像上的相同位置生成对应的3D形式的第二标注信息;获取用户的确认标注指令,保存当前的所述2D图像的标注数据。2.根据权利要求1所述的一种2D与3D图像协同标注的方法,其特征在于,将所述2D图像和所述3D图像分别同时显示在2D视窗和3D视窗之前,还包括:对所述2D图像和所述3D图像进行数据对齐处理。3.根据权利要求2所述的一种2D与3D图像协同标注的方法,其特征在于,对所述2D图像和所述3D图像进行数据对齐处理,包括:获取所述2D图像和所述3D图像中工件的坐标位置;判断所述2D图像和所述3D图像中相同的坐标位置是否对应同一区域;当所述2D图像和所述3D图像中相同的坐标位置对应不同区域,则通过计算偏移位置,移动所述D图像和/或所述3D图像,使得所述2D图像和所述3D图像中相同的坐标位置对应同一区域。4.根据权利要求1所述的一种2D与3D图像协同标注的方法,其特征在于,获取待标注的2D图像对应的3D图像,包括:获取待标注的2D图像的文件名称;在所述待标注的2D图像所在文件夹中,检索与所述待标注的2D图像的文件名称相同的3D图像。5.根据权利要求1所述的一种2D与3D图像协同标注的方法,其特征在于,获取用户的确认标注指令,保存当前的所述2D图像的标注数据,包括:获取确认标注指令所对应的标注数据,所述标注数据至少包括以下一项:标注轮廓边缘点位置、标注的类别;通过通用格式json文件保存所述标注数据,并将所述json文件保存到2D图像所在文件夹中。6.根据权利要求5所述的一种2D与3D图像协同标注的方法,其特征在于,还包...

【专利技术属性】
技术研发人员:张权王刚吕炎州伍绍桂
申请(专利权)人:广州市易鸿智能装备有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1