一种图像处理方法、装置及计算机可读存储介质制造方法及图纸

本发明专利技术实施例公开了一种图像处理方法、装置及计算机可读存储介质，本发明专利技术实施例当检测到视频上的点击指令时，获取视频当前帧的第一图像和点击指令指示的点击位置；确定点击位置在第一图像上的目标物体对象相应的初始轮廓图像；根据目标物体对象的图像特征信息对初始轮廓图像进行调节处理，得到目标轮廓图像；将目标轮廓图像分割为多个子区域图像，并获取每一子区域图像的三维信息进行构建，得到目标物体对象相应的三维图像。以此，通过计算机视觉技术确定视频中的第一图像中点击的目标物体对象相应的初始轮廓图像，通过图像特征信息对初始轮廓图像进行完善，得到目标轮廓图像，根据目标轮廓图像进行三维图像构建，极大的提升了图像处理的效率。

【技术实现步骤摘要】
一种图像处理方法、装置及计算机可读存储介质
本专利技术涉及数据处理
，具体涉及一种图像处理方法、装置及计算机可读存储介质。
技术介绍
随着终端的不断普及与发展，用户越来越依赖终端，终端上可以安装丰富的应用程序，例如，视频类应用，通过视频类应用观看视频已经成为常见的娱乐方式，为了使视频的互动效果更加丰富，可以实时将视频中用户感兴趣的物体进行三维(Dimensions，D)化处理。现有技术中，对物体进行三维化处理之前，用户需要下载感兴趣的物体各个角度的图像，然后综合各个角度的图像构建出物体相应的三维立体图像，进而将构建的三维立体图像进行显示。在对现有技术的研究和实践过程中，本专利技术的专利技术人发现，现有技术中，需要实时下载感兴趣物体各个角度的图像，才能构建物体相应的三维立体图像，过程繁琐，导致图像处理的时间较长，图像处理的效率较低。
技术实现思路
本专利技术实施例提供一种图像处理方法、装置及计算机可读存储介质，旨在提升图像处理的效率。为解决上述技术问题，本专利技术实施例提供以下技术方案：一种图像处理方法，包括：当检测到视频上的点击指令时，获取所述视频当前帧的第一图像和所述点击指令指示的点击位置；确定所述点击位置在所述第一图像上的目标物体对象相应的初始轮廓图像；根据所述目标物体对象的图像特征信息对所述初始轮廓图像进行调节处理，得到目标轮廓图像；将所述目标轮廓图像分割为多个子区域图像，并获取每一子区域图像的三维信息进行构建，得到目标物体对象相应的三维图像。相应的，本专利技术实施例还提供一种基于人工智能的图像处理方法，包括：当检测到视频上的点击指令时，获取所述视频当前帧的第一图像和所述点击指令指示的点击位置；通过边缘检测算法确定所述点击位置在所述第一图像上的目标物体对象相应的初始轮廓图像；将所述初始轮廓图像输入训练后的实例分割算法模型进行实例分割，输出包含所述初始轮廓图像的目标轮廓图像；将所述目标轮廓图像分割为多个子区域图像，并将所述多个子区域图像输入马尔科夫随机场模型中进行三维检测，得到目标物体对象相应的三维图像。相应的，本专利技术实施例还提供一种图像处理装置，包括：第一获取单元，用于当检测到视频上的点击指令时，获取所述视频当前帧的第一图像和所述点击指令指示的点击位置；确定单元，用于确定所述点击位置在所述第一图像上的目标物体对象相应的初始轮廓图像；调节单元，用于根据所述目标物体对象的图像特征信息对所述初始轮廓图像进行调节处理，得到目标轮廓图像；构建单元，用于将所述目标轮廓图像分割为多个子区域图像，并获取每一子区域图像的三维信息进行构建，得到目标物体对象相应的三维图像。在一些实施例中，所述构建单元，具体用于：通过聚类算法将所述目标轮廓图像分割为多个子区域图像；将所述多个子区域图像输入马尔科夫随机场模型中进行三维检测，输出每一子区域图像的三维位置和三维方向，所述马尔科夫随机场模型由多个图像和相应的深度图像训练而成；根据相连的子区域的三维位置和三维方向的关系进行构建，得到目标物体对象相应的三维图像。在一些实施例中，所述图像处理装置，还包括：第二获取单元，用于获取所述视频非当前帧的第二图像；锐化单元，用于对所述第二图像进行锐化处理，以得到锐化处理后的第二图像；识别单元，用于识别出锐化处理后的第二图像中的物体轮廓图像，将与所述目标轮廓图像相似度大于第三预设阈值的物体轮廓图像确定为相似轮廓图像；扩展单元，用于根据所述相似轮廓图像对所述三维图像进行三维扩展。在一些实施例中，所述扩展单元，具体用于：根据所述相似轮廓图像对目标轮廓图像的边缘进行扩展，得到扩展后的目标轮廓图像；根据所述扩展后的目标轮廓图像构建更新后的三维图像。此外，本专利技术实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有多条指令，所述指令适于处理器进行加载，以执行本专利技术实施例提供的任一种图像处理方法或者基于人工智能的图像处理方法中的步骤。本专利技术实施例通过当检测到视频上的点击指令时，获取视频当前帧的第一图像和点击指令指示的点击位置；确定点击位置在第一图像上的目标物体对象相应的初始轮廓图像；根据目标物体对象的图像特征信息对初始轮廓图像进行调节处理，得到目标轮廓图像；将目标轮廓图像分割为多个子区域图像，并获取每一子区域图像的三维信息进行构建，得到目标物体对象相应的三维图像。以此，通过计算机视觉技术确定视频中的第一图像中点击的目标物体对象相应的初始轮廓图像，通过图像特征信息对初始轮廓图像进行完善，得到目标轮廓图像，根据目标轮廓图像进行三维图像构建，相对于需要下载物体对象各个角度的图像进行三维图像构建的方案，本专利技术可以直接从视频中进行识别出完整的目标轮廓图像构建三维图像，极大的提升了图像处理的效率。附图说明为了更清楚地说明本专利技术实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1是本专利技术实施例提供的图像处理方法的场景示意图；图2a是本专利技术实施例提供的图像处理方法的流程示意图；图2b为本专利技术实施例提供的实例分割算法模型的结构示意图；图3是本专利技术实施例提供的图像处理方法的另一流程示意图；图4a为本专利技术实施例提供的图像处理方法的应用场景示意图；图4b为本专利技术实施例提供的图像处理方法的另一应用场景示意图；图5a是本专利技术实施例提供的图像处理装置的结构示意图；图5b是本专利技术实施例提供的图像处理装置的另一结构示意图；图5c是本专利技术实施例提供的图像处理装置的另一结构示意图；图5d是本专利技术实施例提供的图像处理装置的另一结构示意图；图6是本专利技术实施例提供的终端的结构示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。本专利技术实施例提供一种图像处理方法、装置及计算机可读存储介质。其中，该图像处理装置具体可以集成在电子设备，比如终端或服务器等设备中，终端可以包括手机、平板电脑或个人计算机(PC，PersonalComputer)等，该终端中可以安装有客户端，该客户端可以为用于播放视频的客户端，服务器可以包括一个独立运行的服务器或者分布式服务器，也可以包括由多个服务器组成的服务器集群。请参阅图1，以该图像处理装置集成在手机为例，当手机通过客户端播放视频，用户点击该视频上的第一图像中的某一点时，手机生成相应的点击指令，获取该视频当前帧的第一本文档来自技高网...

【技术保护点】
1.一种图像处理方法，其特征在于，包括：/n当检测到视频上的点击指令时，获取所述视频当前帧的第一图像和所述点击指令指示的点击位置；/n确定所述点击位置在所述第一图像上的目标物体对象相应的初始轮廓图像；/n根据所述目标物体对象的图像特征信息对所述初始轮廓图像进行调节处理，得到目标轮廓图像；/n将所述目标轮廓图像分割为多个子区域图像，并获取每一子区域图像的三维信息进行构建，得到目标物体对象相应的三维图像。/n

【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：
当检测到视频上的点击指令时，获取所述视频当前帧的第一图像和所述点击指令指示的点击位置；
确定所述点击位置在所述第一图像上的目标物体对象相应的初始轮廓图像；
根据所述目标物体对象的图像特征信息对所述初始轮廓图像进行调节处理，得到目标轮廓图像；
将所述目标轮廓图像分割为多个子区域图像，并获取每一子区域图像的三维信息进行构建，得到目标物体对象相应的三维图像。


2.根据权利要求1所述的图像处理方法，其特征在于，所述确定所述点击位置在所述第一图像上的目标物体对象相应的初始轮廓图像的步骤，包括：
对所述第一图像进行高斯滤波处理，得到处理后的第一图像；
获取所述处理后的第一图像的梯度值和梯度方向；
基于所述梯度方向对所述梯度值进行非最大值抑制，得到抑制后的第一图像；
将所述抑制后的第一图像中的非边缘点的梯度值进行移除，得到移除后的第一图像；
根据所述点击位置确定在所述移除后的第一图像中的目标物体对象相应的初始轮廓图像。


3.根据权利要求2所述的图像处理方法，其特征在于，所述将所述抑制后的第一图像中的非边缘点的梯度值进行移除，得到移除后的第一图像的步骤，包括：
获取抑制后的第一图像中的梯度值，将梯度值大于第一预设阈值的第一梯度值保留；
将梯度值小于第二预设阈值的第二梯度值移除，所述第一预设阈值大于所述第二预设阈值；
确定梯度值大于所述第二预设阈值且小于所述第一预设阈值的第三梯度值；
当检测到所述第三梯度值相应的边缘点与第一梯度值相应的边缘点连通时，将所述第三梯度值保留；
当检测到所述第三梯度值相应的边缘点与第一梯度值相应的边缘点未连通时，将所述第三梯度值移除，得到移除后的第一图像。


4.根据权利要求1至3任一项所述的图像处理方法，其特征在于，所述根据所述目标物体对象的图像特征信息对所述初始轮廓图像进行调节处理，得到目标轮廓图像的步骤，包括：
提取所述初始轮廓图像相应的图像特征信息；
将所述图像特征信息输入训练后的实例分割算法模型进行实例分割，输出包含所述初始轮廓图像的目标轮廓图像。


5.根据权利要求4所述的图像处理方法，其特征在于，所述将所述图像特征信息输入训练后的实例分割算法模型进行实例分割的步骤之前，还包括：
采集训练图像，所述训练图像中标记目标轮廓图像；
对所述训练图像进行数据增广处理和/或多尺度变化处理，得到目标训练图像；
将所述目标训练图像输入实例分割算法模型进行训练，得到训练后的实例分割算法模型。


6.根据权利要求1至3任一项所述的图像处理方法，其特征在于，所述将所述目标轮廓图像分割为多个子区域图像，并获取每一子区域图像的三维信息进行构建，得到目标物体对象相应的三维图像的步骤，包括：
通过聚类算法将所述目标轮廓图像分割为多个子区域图像；
将所述多个子区域图像输入马尔科夫随机场模型中进行三维检测，输出每一子区域图像的三维位置和三维方向，所述马尔科夫随机场模型由多个图像和相应的深度图像训练而成；
根据相连的子区域的三维位置和三维方向的关系进行构建，得到目标物体对象相应的三维图像。


7.根据权利要求6所述的图像处理方法，其特征在于，所述得到目标物体对象相应的三维图像的步骤之后，还包括：
获取所述视频非当前帧的第二图像；
对所述第二图像进行锐化处理，以得到锐化处理后的第二图像；
识别出锐化处理后的第二图像中的物体轮廓图像，将与所述目标轮廓图像相似度大于第三预设阈值的物体轮廓图像确定为相似轮廓图像；
根据所述相似轮廓图像对所述三维图像进行三维扩展。


8.根据权...

【专利技术属性】
技术研发人员：杨文强，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：广东;44