图像处理方法、装置、设备以及计算机可读介质制造方法及图纸

公开了一种图像处理方法和装置，包括：接收输入图像，对所述输入图像进行处理以确定具有第一尺寸的第一图像特征、具有第二尺寸的第二图像特征和具有第三尺寸的第三图像特征，其中所述第一尺寸小于所述第二尺寸，所述第二尺寸小于所述第三尺寸；利用所述第一尺寸的第一图像特征对所述第二尺寸的第二图像特征进行补偿，以生成第二尺寸的补偿后的第二图像特征；利用所述补偿后的第二图像特征对所述第三尺寸的第三图像特征进行补偿，以生成第三尺寸的补偿后的第三图像特征；以及基于所述补偿后的第二图像特征或所述补偿后的第三图像特征确定输出图像。

【技术实现步骤摘要】
图像处理方法、装置、设备以及计算机可读介质
本公开涉及图像处理领域，具体涉及一种用于图像处理方法、装置、设备以及计算机可读介质。
技术介绍
在现有的图像处理方法中，使用递归的方式实现针对输入图像相关联的多个不同尺寸的图像特征的处理。然而，在使用递归的图像处理算法中，由于需要保存每一级递归生成的结果用于后续使用，因此将占用较大的内存空间。此外，在现有的使用递归的图像处理方法中，高分辨率的图像信息会被转移到低分辨率的图像信息中，并导致更为复杂的参数优化环境，从而使得图像处理的结果更坏。
技术实现思路
针对以上问题，本公开提供一种新的图像处理方法，其能够不使用递归结构而实现对于图像的多个不同尺寸的图像特征的处理。根据本公开的一方面，提出了一种图像处理方法，包括：接收输入图像，对所述输入图像进行处理以确定具有第一尺寸的第一图像特征、具有第二尺寸的第二图像特征和具有第三尺寸的第三图像特征，其中所述第一尺寸小于所述第二尺寸，所述第二尺寸小于所述第三尺寸；利用所述第一尺寸的第一图像特征对所述第二尺寸的第二图像特征进行补偿，以生成第二尺寸的补偿后的第二图像特征；利用所述补偿后的第二图像特征对所述第三尺寸的第三图像特征进行补偿，以生成第三尺寸的补偿后的第三图像特征；以及基于所述补偿后的第二图像特征或所述补偿后的第三图像特征确定输出图像。在一些实施例中，利用所述第一尺寸的第一图像特征对所述第二尺寸的第二图像特征进行补偿，以生成第二尺寸的补偿后的第二图像特征包括：对所述第二尺寸的第二图像特征进行下采样，以得到第一尺寸的下采样后的第二图像特征；对下采样后的第二图像特征和所述第一尺寸的第一图像特征执行去叠加操作，以生成第一尺寸的第一补偿图像特征；对第一补偿图像特征进行上采样，以得到第二尺寸的上采样后的第一补偿图像特征；对上采样后的第一补偿图像特征和所述第二尺寸的第二图像特征执行叠加操作，以生成第二尺寸的补偿后的第二图像特征。在一些实施例中，对下采样后的第二图像特征和所述第一尺寸的第一图像特征执行去叠加操作包括：对下采样后的第二图像特征和所述第一尺寸的第一图像特征中的对应元素执行减法操作；或对下采样后的第二图像特征和所述第一尺寸的第一图像特征的组合执行卷积操作。在一些实施例中，对上采样后的第一补偿图像特征和所述第二尺寸的第二图像特征执行叠加操作包括：对上采样后的第一补偿图像特征和所述第二尺寸的第二图像特征中的对应元素执行加法操作。在一些实施例中，利用所述补偿后的第二图像特征对所述第三尺寸的第三图像特征进行补偿，以生成补偿后的第三图像特征包括：对所述第三尺寸的第三图像特征进行下采样，以得到第二尺寸的下采样后的第三图像特征；对下采样后的第三图像特征和所述补偿后的第二图像特征执行去叠加操作，以生成第二尺寸的第二补偿图像特征；对所述第二尺寸的第二补偿图像特征进行上采样，以得到第三尺寸的上采样后的第二补偿图像特征；对所述第三尺寸的第三图像特征和上采样的第二补偿图像特征执行叠加操作，以生成第三尺寸的补偿后的第三图像特征。在一些实施例中，基于所述补偿后的第二图像特征或所述补偿后的第三图像特征确定输出图像包括：对所述补偿后的第二图像特征进行下采样，以得到第一尺寸的下采样后的补偿后的第二图像特征；对下采样后的补偿后的第二图像特征和所述第一尺寸的第一图像特征执行去叠加操作，以生成第一尺寸的第三补偿图像特征；对所述第三补偿图像特征进行上采样，以得到第二尺寸的上采样后的第三补偿图像特征；对所述补偿后的第二图像特征和所述上采样后的第三补偿图像特征执行叠加操作，以生成第二尺寸的进一步补偿的第二图像特征；对所述补偿后的第三图像特征进行下采样，以得到第二尺寸的下采样后的补偿后的第三图像特征；对下采样后的补偿后的第三图像特征和所述进一步补偿的第二图像特征执行去叠加操作，以生成第二尺寸的第四补偿图像特征；对所述第二尺寸的第四补偿图像特征进行上采样，以得到第三尺寸的上采样后的第四补偿图像特征；对所述补偿后的第三图像特征和上采样的第四补偿图像特征执行叠加操作，以生成第三尺寸的进一步补偿的第三图像特征；以及基于所述进一步补偿的第二图像特征或所述进一步补偿的第三图像特征生成输出图像。在一些实施例中，对所述输入图像进行处理以确定与所述输入图像相关联的具有第一尺寸的第一图像特征、具有第二尺寸的第二图像特征和具有第三尺寸的第三图像特征包括：根据所述输入图像确定具有第一尺寸的第一输入图像，具有第二尺寸的第二输入图像以及具有第三尺寸的第三输入图像，分别对所述第一输入图像、所述第二输入图像和所述第三输入图像进行处理以确定具有第一尺寸的第一图像特征、具有第二尺寸的第一输入图像特征和具有第三尺寸的第二输入图像特征；对所述第一尺寸的第一图像特征进行上采样，并对所述第一输入图像特征和上采样后的第一图像特征执行叠加操作，以获得第二尺寸的第二图像特征；对所述第二尺寸的第二图像特征进行上采样，并对上采样后的第二图像特征和所述第二输入图像特征执行叠加操作，以获得第三尺寸的第三图像特征。在一些实施例中，所述输入图像具有第一尺寸，根据所述输入图像确定具有第一尺寸的第一输入图像，具有第二尺寸的第二输入图像以及具有第三尺寸的第三输入图像包括：将所述输入图像确定为具有第一尺寸的第一输入图像；对第一尺寸的第一输入图像进行上采样以生成具有第二尺寸的第二输入图像；对第二尺寸的第二输入图像进行上采样以生成具有第三尺寸的第三输入图像。在一些实施例中，基于所述补偿后的第二图像特征或所述补偿后的第三图像特征确定输出图像包括：利用所述第一尺寸的第一图像特征对所述补偿后的第二图像特征进行补偿，以生成进一步补偿的第二图像特征；利用所述进一步补偿的第二图像特征对所述补偿后的第三图像特征进行补偿，以生成进一步补偿的第三图像特征；以及基于所述进一步补偿的第二图像特征或所述进一步补偿的第三图像特征生成输出图像。在一些实施例中，利用所述第一尺寸的第一图像特征对所述补偿后的第二图像特征进行补偿，以生成进一步补偿的第二图像特征包括：对所述补偿后的第二图像特征进行下采样，以得到第一尺寸的下采样后的补偿后的第二图像特征；对下采样后的补偿后的第二图像特征和所述第一尺寸的第一图像特征执行去叠加操作，以生成第一尺寸的第三补偿图像特征；对所述第三补偿图像特征进行上采样，以得到第二尺寸的上采样后的第三补偿图像特征；对上采样后的第三补偿图像特征和所述第二尺寸的补偿后的第二图像特征执行叠加操作，以生成第二尺寸的进一步补偿的第二图像特征。在一些实施例中，利用所述进一步补偿的第二图像特征对所述补偿后的第三图像特征进行补偿，以生成进一步补偿的第三图像特征包括：对所述补偿后的第三图像特征进行下采样，以得到第二尺寸的下采样后的补偿后的第三图像特征；对下采样后的补偿后的第三图像特征和所述进一步补偿的第二图像特征执行去叠加操作，以生成第二尺寸的第四补偿图像特征；对所述第二尺寸的第四补偿图像特征进行上采样，以得到第三尺寸的上采样后的第四补偿图像特征；对所述补偿后的第三图像特征和上采样的第四补偿图像特征执行叠加本文档来自技高网...

【技术保护点】
1.一种图像处理方法，包括：/n接收输入图像，/n对所述输入图像进行处理以确定具有第一尺寸的第一图像特征、具有第二尺寸的第二图像特征和具有第三尺寸的第三图像特征，其中所述第一尺寸小于所述第二尺寸，所述第二尺寸小于所述第三尺寸；/n利用所述第一尺寸的第一图像特征对所述第二尺寸的第二图像特征进行补偿，以生成第二尺寸的补偿后的第二图像特征；/n利用所述补偿后的第二图像特征对所述第三尺寸的第三图像特征进行补偿，以生成第三尺寸的补偿后的第三图像特征；以及/n基于所述补偿后的第二图像特征或所述补偿后的第三图像特征确定输出图像。/n

【技术特征摘要】
1.一种图像处理方法，包括：
接收输入图像，
对所述输入图像进行处理以确定具有第一尺寸的第一图像特征、具有第二尺寸的第二图像特征和具有第三尺寸的第三图像特征，其中所述第一尺寸小于所述第二尺寸，所述第二尺寸小于所述第三尺寸；
利用所述第一尺寸的第一图像特征对所述第二尺寸的第二图像特征进行补偿，以生成第二尺寸的补偿后的第二图像特征；
利用所述补偿后的第二图像特征对所述第三尺寸的第三图像特征进行补偿，以生成第三尺寸的补偿后的第三图像特征；以及
基于所述补偿后的第二图像特征或所述补偿后的第三图像特征确定输出图像。


2.如权利要求1所述的图像处理方法，其中，利用所述第一尺寸的第一图像特征对所述第二尺寸的第二图像特征进行补偿，以生成第二尺寸的补偿后的第二图像特征包括：
对所述第二尺寸的第二图像特征进行下采样，以得到第一尺寸的下采样后的第二图像特征；
对下采样后的第二图像特征和所述第一尺寸的第一图像特征执行去叠加操作，以生成第一尺寸的第一补偿图像特征；
对第一补偿图像特征进行上采样，以得到第二尺寸的上采样后的第一补偿图像特征；
对上采样后的第一补偿图像特征和所述第二尺寸的第二图像特征执行叠加操作，以生成第二尺寸的补偿后的第二图像特征。


3.如权利要求2所述的图像处理方法，其中对下采样后的第二图像特征和所述第一尺寸的第一图像特征执行去叠加操作包括：
对下采样后的第二图像特征和所述第一尺寸的第一图像特征中的对应元素执行减法操作；或
对下采样后的第二图像特征和所述第一尺寸的第一图像特征的组合执行卷积操作。


4.如权利要求2所述的图像处理方法，其中对上采样后的第一补偿图像特征和所述第二尺寸的第二图像特征执行叠加操作包括：对上采样后的第一补偿图像特征和所述第二尺寸的第二图像特征中的对应元素执行加法操作。


5.如权利要求2所述的图像处理方法，其中，利用所述补偿后的第二图像特征对所述第三尺寸的第三图像特征进行补偿，以生成补偿后的第三图像特征包括：
对所述第三尺寸的第三图像特征进行下采样，以得到第二尺寸的下采样后的第三图像特征；
对下采样后的第三图像特征和所述补偿后的第二图像特征执行去叠加操作，以生成第二尺寸的第二补偿图像特征；
对所述第二尺寸的第二补偿图像特征进行上采样，以得到第三尺寸的上采样后的第二补偿图像特征；
对所述第三尺寸的第三图像特征和上采样的第二补偿图像特征执行叠加操作，以生成第三尺寸的补偿后的第三图像特征。


6.如权利要求5所述的图像处理方法，基于所述补偿后的第二图像特征或所述补偿后的第三图像特征确定输出图像包括：
对所述补偿后的第二图像特征进行下采样，以得到第一尺寸的下采样后的补偿后的第二图像特征；
对下采样后的补偿后的第二图像特征和所述第一尺寸的第一图像特征执行去叠加操作，以生成第一尺寸的第三补偿图像特征；
对所述第三补偿图像特征进行上采样，以得到第二尺寸的上采样后的第三补偿图像特征；
对所述补偿后的第二图像特征和所述上采样后的第三补偿图像特征执行叠加操作，以生成第二尺寸的进一步补偿的第二图像特征；
对所述补偿后的第三图像特征进行下采样，以得到第二尺寸的下采样后的补偿后的第三图像特征；
对下采样后的补偿后的第三图像特征和所述进一步补偿的第二图像特征执行去叠加操作，以生成第二尺寸的第四补偿图像特征；
对所述第二尺寸的第四补偿图像特征进行上采样，以得到第三尺寸的上采样后的第四补偿图像特征；
对所述补偿后的第三图像特征和上采样的第四补偿图像特征执行叠加操作，以生成第三尺寸的进一步补偿的第三图像特征；以及
基于所述进一步补偿的第二图像特征或所述进一步补偿的第三图像特征生成输出图像。


7.如权利要求1-6任一项所述的图像处理方法，对所述输入图像进行处理以确定与所述输入图像相关联的具有第一尺寸的第一图像特征、具有第二尺寸的第二图像特征和具有第三尺寸的第三图像特征包括：
根据所述输入图像确定具有第一尺寸的第一输入图像，具有第二尺寸的第二输入图像以及具有第三尺寸的第三输入图像，
分别对所述第一输入图像、所述第二输入图像和...

【专利技术属性】
技术研发人员：那彦波，刘瀚文，朱丹，
申请(专利权)人：京东方科技集团股份有限公司，
类型：发明
国别省市：北京;11