本申请公开了一种图像数据处理方法、装置、设备及存储介质。其中方法包括：获取样本对象的第一原始图像，并基于第一原始图像确定第二原始图像；第一原始图像和第二原始图像均为三通道图像；基于第一原始图像对应的每个通道的图像，对第一原始图像进行扩增，得到多个新的第一图像，以及，基于第二原始图像对应的每个通道的图像，对第二原始图像进行扩增，得到多个新的第二图像；基于第一原始图像和第二原始图像构建原始样本对，并基于多个新的第一图像和多个新的第二图像构建多个扩增样本对；原始样本对和多个扩增样本对共同用于对待训练孪生网络进行训练。这样，可提高训练后的孪生网络的泛化能力。
【技术实现步骤摘要】
本申请涉及数据处理领域，特别是涉及一种图像数据处理方法、装置、设备及存储介质。
技术介绍
1、目前，用于对车辆座舱内目标对象的行为进行识别的孪生网络是通过以下方式训练得到的：对主驾驶位图像帧序列进行人脸检测，若检测到人脸，则在人脸感兴趣区域(region of interest，roi)进行人脸关键点回归；根据关键点截取roi区域的图像；之后，将截取的roi区域的图像输入到待训练孪生网络中，对待训练孪生网络进行训练，从而得到用于对车辆座舱内目标对象的行为进行识别的孪生网络。这样，由于输入到待训练孪生网络中的数据量较少，从而导致孪生网路学习到的特征较少，进而导致训练得到的孪生网络的泛化能力较差。
2、因此，如何提高训练后的孪生网络的泛化能力成为了一个亟待解决的问题。
技术实现思路
1、本申请实施例提供了一种图像数据处理方法、装置、设备及存储介质，可提高训练后的孪生网络的泛化能力。
2、第一方面，本申请实施例提供了一种图像数据处理方法，该方法包括：
3、获取样本对象的第一原始图像，并基于第一原始图像确定第二原始图像；第二原始图像为第一原始图像中目标区域对应的局部图像，目标区域为与样本对象的待识别行为相关的区域；第一原始图像和第二原始图像均为三通道图像；
4、基于第一原始图像对应的每个通道的图像，对第一原始图像进行扩增，得到多个新的第一图像，以及，基于第二原始图像对应的每个通道的图像，对第二原始图像进行扩增，得到多个新的第二图像；
<
p>5、基于第一原始图像和第二原始图像构建原始样本对，并基于多个新的第一图像和多个新的第二图像构建多个扩增样本对；原始样本对和多个扩增样本对共同用于对待训练孪生网络进行训练，训练后的孪生网络用于对车辆座舱内目标对象的待识别行为进行识别。6、在其中一个实施例中，基于第一原始图像对应的每个通道的图像，对第一原始图像进行扩增，得到多个新的第一图像，以及，基于第二原始图像对应的每个通道的图像，对第二原始图像进行扩增，得到多个新的第二图像，包括：对第一原始图像对应的三个通道的图像分别进行图像划分处理，得到每个通道的图像对应的多个第一子图像，以及，对第二原始图像对应的三个通道的图像分别进行图像划分处理，得到，每个通道的图像对应的多个第二子图像；针对第一原始图像的每个通道的图像对应的多个第一子图像，从每个第一子图像中分别选取预设数量的像素点，得到多个第一子图像对应的多组像素点，并基于多组像素点，确定新的第一图像；基于第一原始图像的三个通道的图像分别扩增得到的新的第一图像，得到多个新的第一图像；针对第二原始图像的每个通道的图像对应的多个第二子图像，从每个第二子图像中分别选取预设数量的像素点，得到多个第二子图像对应的多组像素点，并基于多组像素点，确定新的第二图像；基于第二原始图像的三个通道的图像分别三个通道的图像扩增得到的新的第一图像，得到多个新的第一图像。
7、在其中一个实施例中，对第一原始图像对应的三个通道的图像分别进行图像划分处理，得到每个通道的图像对应的多个第一子图像，以及，对第二原始图像对应的三个通道的图像分别进行图像划分处理，得到每个通道的图像对应的多个第二子图像，包括：对第一原始图像对应的三个通道的图像的像素点分别进行均等划分，得到每个通道的图像对应的等分后的多个第一子图像；以及，对第二原始图像对应的三个通道的图像的像素点分别进行均等划分，得到每个通道的图像对应的等分后的多个第二子图像。
8、在其中一个实施例中，针对第一原始图像的每个通道的图像对应的多个第一子图像，从每个第一子图像中分别选取预设数量的像素点，得到多个第一子图像对应的多组像素点，并基于多组像素点，确定新的第一图像，包括：针对第一原始图像的每个通道的图像对应的多个第一子图像，从每个第一子图像中分别选取预设数量的像素点，得到多个第一子图像对应的至少一组像素点，并基于至少一组像素点，确定本轮扩增的至少一个新的第一图像；在确定未遍历完每个第一子图像中的预设数量的像素点的全部组合的情况下，执行从每个第一子图像中分别选取预设数量的像素点，得到多个第一子图像对应的至少一组像素点，并基于至少一组像素点，确定新一轮扩增的至少一个新的第一图像的步骤；直至遍历完每个第一子图像中的预设数量的像素点的全部组合，由多轮扩增得到的新的第一图像，得到多个新的第一图像。
9、在其中一个实施例中，针对第二原始图像的每个通道的图像对应的多个第二子图像，从每个第二子图像中分别选取预设数量的像素点，得到多个第二子图像对应的多组像素点，并基于多组像素点，确定新的第二图像，包括：针对第二原始图像的每个通道的图像对应的多个第二子图像，从每个第二子图像中分别选取预设数量的像素点，得到多个第二子图像对应的至少一组像素点，并基于至少一组像素点，确定本轮扩增的至少一个新的第二图像；在确定未遍历完每个第二子图像中的预设数量的像素点的全部组合的情况下，执行从每个第二子图像中分别选取预设数量的像素点，得到多个第二子图像对应的至少一组像素点，并基于至少一组像素点，确定新一轮扩增的至少一个新的第二图像的步骤，直至遍历完每个第一子图像中的预设数量的像素点的全部组合，由多轮扩增得到的新的第一图像，得到多个新的第二图像。
10、在其中一个实施例中，基于第一原始图像对应的每个通道的图像，对第一原始图像进行扩增，得到多个新的第一图像，以及，基于第二原始图像对应的每个通道的图像，对第二原始图像进行扩增，得到多个新的第二图像，包括：针对第一原始图像，将第一通道图像中预设像素点的像素值更新为第二通道图像或第三通道图像中预设像素点的像素值；将第二通道图像中预设像素点的像素值更新为第一通道图像或第三通道图像中预设像素点的像素值；将第三通道图像中预设像素点的像素值更新为第一通道图像或第二通道图像中预设像素点的像素值；基于更新像素值后的第一通道图像、更新像素值后的第二通道图像以及更新像素值后的第三通道图像，得到本轮扩增得到的新的第一图像；由多轮扩增得到的新的第一图像，得到多个新的第一图像；以及，针对第二原始图像，将第一通道图像中预设像素点的像素值更新为第二通道图像或第三通道图像中预设像素点的像素值；将第二通道图像中预设像素点的像素值更新为第一通道图像或第三通道图像中预设像素点的像素值；将第三通道图像中预设像素点的像素值更新为第一通道图像或第二通道图像中预设像素点的像素值；基于更新像素值后的第一通道图像、更新像素值后的第二通道图像以及更新像素值后的第三通道图像，得到本轮扩增得到的新的第二图像；由多轮扩增得到的新的第二图像，得到多个新的第二图像。
11、在其中一个实施例中，该方法还包括：基于原始样本对和多个扩增样本对，确定样本图像对集合；针对样本图像对集合中的每个样本图像对，将该样本图像对中的第一样本图像输入到待训练孪生网络包括的第一特征提取网络中，得到第一样本图像对应的第一样本图像特征，以及，将该样本图像对中的第二样本图像输入到待训练孪生网络包括的第二特征提取网络中，得到第二样本图像对应的本文档来自技高网
...
【技术保护点】
1.一种图像数据处理方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述基于所述第一原始图像对应的每个通道的图像，对所述第一原始图像进行扩增，得到多个新的第一图像，以及，基于所述第二原始图像对应的每个通道的图像，对所述第二原始图像进行扩增，得到多个新的第二图像，包括：
3.根据权利要求2所述的方法，其特征在于，所述对所述第一原始图像对应的三个通道的图像分别进行图像划分处理，得到每个所述通道的图像对应的多个第一子图像，以及，对所述第二原始图像对应的三个通道的图像分别进行图像划分处理，得到每个所述通道的图像对应的多个第二子图像，包括：
4.根据权利要求2所述的方法，其特征在于，所述针对所述第一原始图像的每个所述通道的图像对应的多个第一子图像，从每个所述第一子图像中分别选取预设数量的像素点，得到多个所述第一子图像对应的多组像素点，并基于所述多组像素点，确定新的第一图像，包括：
5.根据权利要求4所述的方法，其特征在于，所述针对所述第二原始图像的每个所述通道的图像对应的多个第二子图像，从每个所述第二子图像中分别选取所述预设数量的像素点，得到多个所述第二子图像对应的多组像素点，并基于所述多组像素点，确定新的第二图像，包括：
6.根据权利要求1所述的方法，其特征在于，所述基于所述第一原始图像对应的每个通道的图像，对所述第一原始图像进行扩增，得到多个新的第一图像，以及，基于所述第二原始图像对应的每个通道的图像，对所述第二原始图像进行扩增，得到多个新的第二图像，包括：
7.根据权利要求1至6任一项所述的方法，其特征在于，所述方法还包括：
8.一种图像数据处理装置，其特征在于，所述装置包括：
9.一种计算设备，其特征在于，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现权利要求1至7任一项所述的方法的步骤。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
...
【技术特征摘要】
1.一种图像数据处理方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述基于所述第一原始图像对应的每个通道的图像，对所述第一原始图像进行扩增，得到多个新的第一图像，以及，基于所述第二原始图像对应的每个通道的图像，对所述第二原始图像进行扩增，得到多个新的第二图像，包括：
3.根据权利要求2所述的方法，其特征在于，所述对所述第一原始图像对应的三个通道的图像分别进行图像划分处理，得到每个所述通道的图像对应的多个第一子图像，以及，对所述第二原始图像对应的三个通道的图像分别进行图像划分处理，得到每个所述通道的图像对应的多个第二子图像，包括：
4.根据权利要求2所述的方法，其特征在于，所述针对所述第一原始图像的每个所述通道的图像对应的多个第一子图像，从每个所述第一子图像中分别选取预设数量的像素点，得到多个所述第一子图像对应的多组像素点，并基于所述多组像素点，确定新的第一图像，包括：
5.根据权利要求4所述的方法，其特征在于，所述针对所述...
【专利技术属性】
技术研发人员：陈婷婷，卢先英，孙洪福，于红超，徐开庭，
申请(专利权)人：重庆赛力斯凤凰智创科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。