本发明专利技术实施例提供一种非对称色彩失调一致性的拟合重建的方法及装置，属于图像重构领域，所述方法包括：获取受损图像，受损图像为非对称色彩失调的图像；对受损图像进行模糊估计，确定受损图像中的受损区域；建立三维空间，三维空间中设置虚拟摄像机；将受损图像设于所述三维空间中，通过虚拟摄像机对受损图像进行多角度拍摄得到多个拍摄图像，拍摄图像至少延迟一帧；对拍摄图像进行实时双向渲染，得到最终图像源。该方法减少了图像的色彩偏差，实现了正常接收场景的物理反馈，实现了二维图像世界与三维图像世界的交互，及图像之间的融合互动。动。动。
【技术实现步骤摘要】
一种非对称色彩失调一致性的拟合重建的方法及装置
[0001]本专利技术涉及图像重构领域，具体地涉及一种非对称色彩失调一致性的拟合重建的方法及装置。
技术介绍
[0002]随着元宇宙概念的推出，虚拟世界和真实世界的交互变得格外重要，面向于虚实交互的技术成为视听领域的核心技术。在传统技术中，虚实交互依靠大量的后期制作。由于色彩空间上存在着多种类型，在实时渲染管线中，对二维物体附着在三维物体中显示出图像的处理方法并不友好，具体体现为对同一个图像源进行处理后出现的非对称色彩失调，如画质下降，亮部、暗部、中部色彩变色明显，伽玛失衡等。而且大量的渲染渲染管线主要是面向三维数字的渲染，对二维图像的处理通常会另辟一个渲染管道出来进行二维处理，这样会增加计算机的开销，从而降低实时性，尤其在是4k、8k普及的的今天，想要实时去处理多路图像，开辟渲染管道的方式会严重影响图像的实时性和工作效率。
[0003]现有技术还会通过对图像的二次反向处理，但由于在最新的3Dlut 中，图像的处理是非线性的，其只能进行点状拟合，对图像的还原并不精准。而且对于同一个图像在每一帧都反向计算会产生大量开销，所以该方式并不适用于高精度实时计算。现有技术大部是取用多层分离的处理方式，图像源是一个独立的管道，其他的分为另一支管道，属于多支管道并行，例如现在的虚拟演播室，虚拟直播间等。这样虽然减少了图像的色彩失调，但是却无法与虚拟场景本身发生自然互动，其通常所见互动均为提前预设或由人工干预。
技术实现思路
[0004]本专利技术实施例的目的是提供一种非对称色彩失调一致性的拟合重建的方法及装置，该方法减少了图像的色彩偏差，实现了正常接收场景的物理反馈，及图像之间的融合互动。
[0005]为了实现上述目的，本专利技术实施例提供一种非对称色彩失调一致性的拟合重建的方法，所述方法包括：获取受损图像，所述受损图像为非对称色彩失调的图像；对所述受损图像进行模糊估计，确定所述受损图像中的受损区域；建立三维空间，所述三维空间中设置虚拟摄像机；将所述受损图像设于所述三维空间中，通过所述虚拟摄像机对所述受损图像进行多角度拍摄得到多个拍摄图像，所述拍摄图像至少延迟一帧；对所述拍摄图像进行实时双向渲染，得到最终图像源，其中，所述双向渲染包括前向渲染和后向渲染；所述前向渲染为对所述拍摄图像进行拟合得到第一类图像；所述后向渲染为根据所述第一类图像对所述受损图像中的受损区域进行反向拟合得到最终图像源。
[0006]可选的，所述对所述受损图像进行模糊估计，确定所述受损图像中的受损区域，包括：利用AI分析识别受损图像中的物体，根据所述物体的形状和颜色确定所述物体的类别；根据所述物体的类别和AI分析来确定所述物体是否为受损区域。
[0007]可选的，所述前向渲染为对所述拍摄图像进行拟合得到第一类图像，包括：根据所
述拍摄图像与参考图像的相似度提取拍摄图像像素的运动特性曲线；根据所述运动特性曲线确定所述拍摄图像与参考图像的拟合参数；对满足要求的拟合参数进行感知融合得到所述第一类图像，所述感知融合通过AI辅助实现。
[0008]可选的，所述根据所述拍摄图像与参考图像的相似度提取拍摄图像像素的运动特性曲线，包括：渲染所述拍摄图像与参考图像中的各个序列帧，依次融合所述序列帧得到所述运动特性曲线。
[0009]可选的，所述根据所述第一类图像对所述受损图像中的受损区域进行反向拟合，用于改变受损图像的非对称色彩失调的部分；所述反向拟合包括对每一个光源以逐像素方式进行延迟着色。
[0010]另一方面，本专利技术提供一种非对称色彩失调一致性的拟合重建的装置，所述装置包括：获取模块，用于获取受损图像，所述受损图像为非对称色彩失调的图像；确认模块，用于通过对所述受损图像进行模糊估计，确定所述受损图像中的受损区域；拟合重建模块，用于建立三维空间，所述三维空间中设置虚拟摄像机；将所述受损图像设于所述三维空间中，通过所述虚拟摄像机对所述受损图像进行多角度拍摄，得到多个拍摄图像，所述拍摄图像至少延迟一帧；以及，对所述拍摄图像进行实时双向渲染，得到最终图像源，其中，所述双向渲染包括前向渲染和后向渲染，所述前向渲染为对所述拍摄图像进行拟合得到第一类图像，所述后向渲染为根据所述第一类图像对所述受损图像中的受损区域进行反向拟合得到最终图像源。
[0011]可选的，所述通过对所述受损图像进行模糊估计，确定所述受损图像中的受损区域，包括：利用AI分析识别受损图像中的物体，根据所述物体的形状和颜色确定所述物体的类别；根据所述物体的类别和AI分析来确定所述物体是否为受损区域。
[0012]可选的，所述前向渲染为对所述拍摄图像进行拟合得到第一类图像，包括：根据所述拍摄图像与参考图像的相似度提取拍摄图像像素的运动特性曲线；根据所述运动特性曲线确定所述拍摄图像与参考图像的拟合参数；对满足要求的拟合参数进行感知融合得到所述第一类图像，所述感知融合通过AI辅助实现。
[0013]可选的，所述根据所述拍摄图像与参考图像的相似度提取拍摄图像像素的运动特性曲线，包括：渲染所述拍摄图像与参考图像中的各个序列帧，依次融合所述序列帧得到所述运动特性曲线。
[0014]可选的，所述根据所述第一类图像对所述受损图像中的受损区域进行反向拟合，用于改变受损图像的非对称色彩失调的部分；所述反向拟合包括对每一个光源以逐像素方式进行延迟着色。
[0015]本专利技术的一种非对称色彩失调一致性的拟合重建的方法，所述方法包括：获取受损图像，所述受损图像为非对称色彩失调的图像；对所述受损图像进行模糊估计，确定所述受损图像中的受损区域；建立三维空间，所述三维空间中设置虚拟摄像机；将所述受损图像设于所述三维空间中，通过所述虚拟摄像机对所述受损图像进行多角度拍摄得到多个拍摄图像，所述拍摄图像至少延迟一帧；对所述拍摄图像进行实时双向渲染，得到最终图像源，其中，所述双向渲染包括前向渲染和后向渲染；所述前向渲染为对所述拍摄图像进行拟合得到第一类图像；所述后向渲染为根据所述第一类图像对所述受损图像中的受损区域进行反向拟合得到最终图像源。该方法将受损图像作为标记物体在三维空间中移动，通过采用
模糊估计、一致性拟合重建及感知跳跃式虚拟渲染等技术实现反拟合重建，减少了图像的色彩偏差，实现了正常接收场景的物理反馈，三维图像世界与二维图像世界的交互及图像之间的融合互动。
[0016]本专利技术实施例的其它特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
[0017]附图是用来提供对本专利技术实施例的进一步理解，并且构成说明书的一部分，与下面的具体实施方式一起用于解释本专利技术实施例，但并不构成对本专利技术实施例的限制。在附图中：图1和图2是本专利技术的一种非对称色彩失调一致性的拟合重建的方法的流程示意图；图3是现有的模糊估计和本专利技术的模糊估计的对比示意图；图4是本专利技术的建立虚拟摄像机的示意图；图5为本专利技术的神经网络模型确定图像立体模型的示意图；图6是本专利技术的卷积局部连接示意图；图7和图8是本专利技术的实时双向渲染流程的示意图本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种非对称色彩失调一致性的拟合重建的方法，其特征在于，所述方法包括：获取受损图像，所述受损图像为非对称色彩失调的图像；对所述受损图像进行模糊估计，确定所述受损图像中的受损区域；建立三维空间，所述三维空间中设置虚拟摄像机；将所述受损图像设于所述三维空间中，通过所述虚拟摄像机对所述受损图像进行多角度拍摄得到多个拍摄图像，所述拍摄图像至少延迟一帧；对所述拍摄图像进行实时双向渲染，得到最终图像源，其中，所述双向渲染包括前向渲染和后向渲染；所述前向渲染为对所述拍摄图像进行拟合得到第一类图像；所述后向渲染为根据所述第一类图像对所述受损图像中的受损区域进行反向拟合得到最终图像源。2.根据权利要求1所述的方法，其特征在于，所述对所述受损图像进行模糊估计，确定所述受损图像中的受损区域，包括：利用AI分析识别受损图像中的物体，根据所述物体的形状和颜色确定所述物体的类别；根据所述物体的类别和AI分析来确定所述物体是否为受损区域。3.根据权利要求1所述的方法，其特征在于，所述前向渲染为对所述拍摄图像进行拟合得到第一类图像，包括：根据所述拍摄图像与参考图像的相似度提取拍摄图像像素的运动特性曲线；根据所述运动特性曲线确定所述拍摄图像与参考图像的拟合参数；对满足要求的拟合参数进行感知融合得到所述第一类图像，所述感知融合通过AI辅助实现。4.根据权利要求3所述的方法，其特征在于，所述根据所述拍摄图像与参考图像的相似度提取拍摄图像像素的运动特性曲线，包括：渲染所述拍摄图像与参考图像中的各个序列帧，依次融合所述序列帧得到所述运动特性曲线。5.根据权利要求1所述的方法，其特征在于，所述根据所述第一类图像对所述受损图像中的受损区域进行反向拟合，用于改变受损图像的非对称色彩失调的部分；所述反向拟合包括对每一个光源以逐像素方式进行延迟着色。6.一种非对称色彩失调一致性的拟合重建的装置，...
【专利技术属性】
技术研发人员：任志忠，
申请(专利权)人：北京天图万境科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。