一种移动图像的采集分析系统及方法技术方案

本发明专利技术公开了一种移动图像的采集分析方法，包括步骤S100：提取待处理视频流进行分帧处理得到若干帧图像；分别对若干帧图像内的各区别景物信息进行捕捉和各自景物整合信息；步骤S200：基于景物整合信息对待处理视频流进行片段划分；步骤S300：对各图像帧进行目标景物判别并对若干段视频序列进行期望图像的选取；步骤S400：对部分期望图像进行目标景物的运动情况识别和调整；步骤S500：将最终选取得到的期望图像向用户推送，用户可基于自我意愿选取图像；为更好的实现上述方法，还提出了一种移动图像的采集分析系统；本申请当视频的中画面场景为文字或者是图表的话，对画面场景的识别可对应为对文字以及图表的信息识别。可对应为对文字以及图表的信息识别。可对应为对文字以及图表的信息识别。

【技术实现步骤摘要】
一种移动图像的采集分析系统及方法


[0001]本专利技术涉及对视频流内容采集处理
，具体为一种移动图像的采集分析系统及方法。

技术介绍

[0002]对于一段视频流，用户对于一段视频流内出现的部分画面场景想要获取的话，通常采用自截图的方法，但是自截图的瞬间很可能是影片帧与帧之间的变换之处,既有可能对于期望图像的截取做不到精准，且若视频流内出现动态的景物，则想要采集到一张动态景物观赏效果极佳的照片在难度上更是加大的；同时视频流内包括很多图像，若只是通过自截图进行图像的采集，意味着需要对于视频流不断的回流到想要的场景时刻，降低了图像采集的效率，同时影响最终得到的图像观赏效果。

技术实现思路

[0003]本专利技术的目的在于提供一种移动图像的采集分析系统及方法，以解决上述
技术介绍
中提出的问题。
[0004]为了解决上述技术问题，本专利技术提供如下技术方案：一种移动图像的采集分析方法，方法包括：
[0005]步骤S100：提取待处理视频流，对待处理视频流进行分帧处理得到若干帧图像；分别对若干帧图像内的各区别景物信息进行捕捉，得到待处理视频流内若干帧图像的各自景物整合信息；本申请当视频的中画面场景为文字或者是图表的话，对画面场景的识别可对应为对文字以及图表的信息识别；
[0006]步骤S200：基于得到的若干帧图像的景物整合信息对待处理视频流进行片段划分生成若干段视频序列；
[0007]步骤S300：对若干段视频序列内各图像帧进行目标景物判别得到目标景物的判别结果；基于判别结果分别对若干段视频序列进行期望图像的选取；
[0008]步骤S400：对步骤S300中选取的部分期望图像进行目标景物的运动情况识别，基于运动情况识别得到的结果对选取的期望图像进行调整；
[0009]步骤S500：将最终选取得到的期望图像向用户推送，用户可基于自我意愿在期望图像中选取图像。
[0010]进一步的，步骤S100中对若干张图像帧内的景物信息捕捉和景物信息整合的步骤包括：
[0011]步骤S101：分别获取若干帧图像的背景画面颜色种类，对各背景画面颜色种类的分布面积进行计算；设置颜色分布面积阈值，将分布面积小于颜色分布面积阈值的颜色种类信息作剔除标记；对若干帧图像内景物进行轮廓提取，得到n个景物轮廓；设置轮廓线间隔阈值，基于轮廓线间隔阈值对n个景物轮廓之间出现的间隔断点距离进行比较，将间隔断点距离小于或等于轮廓线间隔阈值的景物轮廓进行组合作为一个整体景物轮廓；
[0012]步骤S102：找寻步骤S101中初步标记剔除信息所对应的景物轮廓；若景物轮廓存在与其间隔断点距离小于或等于轮廓线间隔阈值的其他景物轮廓，消除剔除标记；若作了剔除标记的颜色种类信息没有对应的景物轮廓，对颜色种类信息进行剔除；
[0013]步骤S103：将步骤S101至步骤S102中的信息进行整合，分别得到若干帧图像的各自景物整合信息M，景物整合信息M的形式如：其中，a，b，c，d分别表示在一图像帧内从左往右依次展现的不同景物轮廓；r
i
，e
i
，z
i
，u
i
分别表示不同景物轮廓内的颜色种类集；表示景物轮廓a上有颜色种类集r
i
；表示景物轮廓b上有颜色种类集e
i
；表示景物轮廓c上有颜色种类集z
i
；表示景物轮廓d上有颜色种类集u
i
；
[0014]上述通过对各图像帧内的景物信息进行捕捉和整合是为了得到在所述待处理视频流内的所有图像帧的不同景物信息，并在所有的景物信息中对相同景物信息的整合，即一段视频流内可能会出现多个场景画面，通过对不同画像中景物信息的捕捉和整合区分得到处于同一场景画面下的图像。
[0015]进一步的，步骤S200对待处理视频流进行片段划分的步骤包括：
[0016]步骤S201：获取设备传输帧率信息，设设备每秒传输fps帧图像，对设备每秒传输的fps帧图像进行信息汇集；
[0017]步骤S202：设将在待处理视频流时间戳0～t0内出现的图像帧汇集为图像帧集Q1；t0为待处理视频流的第一间隔时间，Q1内所有图像帧的景物整合信息为内所有图像帧的景物整合信息为内所有图像帧的景物整合信息为其中，M
11
、M
12
、M
12
…
分别表示Q1内第一张、第二张、第三张
…
图像帧的景物整合信息；将在t0～t0‑1内出现的图像帧汇集为图像帧集Q2，t0‑1表示t0的下一第一间隔时间，Q2内所有图像帧的景物整合信息为内所有图像帧的景物整合信息为其中，M
21
、M
22
、M
23
…
分别表示Q2内第一张、第二张、第三张
…
图像帧的景物整合信息；
[0018]步骤S203：将图像帧集Q1内所有图像帧的景物整合信息与图像帧集Q2内所有图像帧的景物整合信息之间进行比对得到比对结果P；进行计算，设置对比阈值；若比对结果P小于对比阈值，将t0作为片段划分节点；
[0019]步骤S204：若比对结果P大于或等于对比阈值，将0～t0‑1内的图像帧集进行合并，将图像帧集Q1与图像帧集Q2内的景物整合信息与也对应合并；紧接着找寻t0‑1～t0‑2内出现的图像帧汇集为图像帧集Q3，t0‑2表示t0‑1的下一间隔时间，Q3内所有图像帧的景物整合信息为合信息为其中，M
31
、M
32
、M
33
分别表示Q3内第一张、第二张、第三张图像帧的景物整合信息，将图像帧集Q3与图像帧集Q1、图像帧集Q2合并的帧集进行景物整合信息比对得到比对结果P，若比对结果P小于对比阈值，将t0‑1作为片段划分节点，若比对结果P大于或等于对比阈值，将0～t0‑2内的图像帧集进行合并；以此类推，直至将待处理视频流全部遍历划分完成得到若干段视频序列；
[0020]上述对视频流进行划分的目的是为了通过得到的划分节点将待处理视频流分为一段段含有不同景物或者说场景画面的视频片段，而对其进行划分的另一个目的也是为了在后续步骤中采集期望图像时，可以采集到含有不同景物或者说场景画面的期望图像，相当于是为期望图像的采集提供了不同采集来源。
[0021]进一步的，步骤S300包括：
[0022]步骤S301：将每一段视频序列内的每一图像帧进行图像对角线连接，连接得到两条对角线，将两条图像对角线的相交点作为目标基准点，根据图像帧的高宽选定半径值R，形成焦点目标区域S＝πR2；
[0023]步骤S302：对每一段视频序列中各图像帧焦点目标区域内涵盖的不同景物轮廓面积进行计算，将图像帧焦点目标区域内涵盖面积最大的景物轮廓作为图像帧的目标景物；若一段视频序列中各图像帧的目标景物总数为1，则在该段视频序列中选取在焦点目标区域内涵盖目标景物面积最大的一图像帧作为该段视频序列内的期望图本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种移动图像的采集分析方法，其特征在于，所述方法包括：步骤S100：提取待处理视频流，对所述待处理视频流进行分帧处理得到若干帧图像；分别对所述若干帧图像内的各区别景物信息进行捕捉，得到所述待处理视频流内所述若干帧图像的各自景物整合信息；步骤S200：基于得到的所述若干帧图像的景物整合信息对所述待处理视频流进行片段划分生成若干段视频序列；步骤S300：对所述若干段视频序列内各图像帧进行目标景物判别得到目标景物的判别结果；基于所述判别结果分别对所述若干段视频序列进行期望图像的选取；步骤S400：对所述步骤S300中选取的部分期望图像进行目标景物的运动情况识别，基于所述运动情况识别得到的结果对选取的期望图像进行调整；步骤S500：将最终选取得到的期望图像向用户推送，用户可基于自我意愿在所述期望图像中选取图像。2.根据权利要求1所述的一种移动图像的采集分析方法，其特征在于，所述步骤S100中对所述若干张图像帧内的景物信息捕捉和景物信息整合的步骤包括：步骤S101：分别获取所述若干帧图像的背景画面颜色种类，对各所述背景画面颜色种类的分布面积进行计算；设置颜色分布面积阈值，将分布面积小于所述颜色分布面积阈值的颜色种类信息作剔除标记；对所述若干帧图像内景物进行轮廓提取，得到n个景物轮廓；设置轮廓线间隔阈值，基于所述轮廓线间隔阈值对所述n个景物轮廓之间出现的间隔断点距离进行比较，将间隔断点距离小于或等于所述轮廓线间隔阈值的景物轮廓进行组合作为一个整体景物轮廓；步骤S102：找寻所述步骤S101中初步标记剔除信息所对应的景物轮廓；若所述景物轮廓存在与其间隔断点距离小于或等于所述轮廓线间隔阈值的其他景物轮廓，消除所述剔除标记；若作了剔除标记的所述颜色种类信息没有对应的景物轮廓，对所述颜色种类信息进行剔除；步骤S103：将所述步骤S101至步骤S102中的信息进行整合，分别得到所述若干帧图像的各自景物整合信息M，所述景物整合信息M的形式如：其中，a，b，c，d分别表示在一图像帧内从左往右依次展现的不同景物轮廓；r
i
，e
i
，z
i
，u
i
分别表示所述不同景物轮廓内的颜色种类集；表示景物轮廓a上有颜色种类集r
i
；表示景物轮廓b上有颜色种类集e
i
；表示景物轮廓c上有颜色种类集z
i
；表示景物轮廓d上有颜色种类集u
i
。3.根据权利要求1所述的一种移动图像的采集分析方法，其特征在于，所述步骤S200对所述待处理视频流进行片段划分的步骤包括：步骤S201：获取设备传输帧率信息，设所述设备每秒传输fps帧图像，对所述设备每秒传输的fps帧图像进行信息汇集；步骤S202：设将在所述待处理视频流时间戳0～t0内出现的图像帧汇集为图像帧集Q1；t0为所述待处理视频流的第一间隔时间，Q1内所有图像帧的景物整合信息为内所有图像帧的景物整合信息为其中，M
11
、M
12
、M
12
…
分别表示Q1内第一张、第二张、第三张
…
图像帧的景物整合信息；将在t0～t0‑1内出现的图像帧汇集为图像帧集Q2，t0‑1表示t0的下一间
隔时间，Q2内所有图像帧的景物整合信息为内所有图像帧的景物整合信息为其中，M
21
、M
22
、M
23
…
分别表示Q2内第一张、第二张、第三张
…
图像帧的景物整合信息；步骤S203：将所述图像帧集Q1内所有图像帧的景物整合信息与所述图像帧集Q2内所有图像帧的景物整合信息之间进行比对得到比对结果P；进行计算，设置对比阈值；若所述比对结果P小于所述对比阈值，将所述t0作为片段划分节点；步骤S204：若所述比对结果P大于或等于所述对比阈值，将0～t0‑1内的图像帧集进行合并，将所述图像帧集Q1与所述图像帧集Q2内的景物整合信息与也对应合并；紧接着找寻t0‑1～t0‑2内出现的图像帧汇集为图像帧集Q3，t0‑2表示t0‑1的下一间隔时间，Q3内所有图像帧的景物整合信息为像帧的景物整合信息为其中，M
31
、M
32
、M
33
分别表示Q3内第一张、第二张、第三张图像帧的景物整合信息，将所述图像帧集Q3与图像帧集Q1、图像帧集Q2合并的帧集进行景物整合信息比对得到比对结果P，合并的帧集进行景物整合信息比对得到比对结果P，若所述比对结果P小于所述对比阈值，将所述t0‑1作为片段划分节点，若比对结果P大于或等于对比阈值，将0～t0‑2内的图像帧集进行合并，以此类推，直至将所述待处理视频流全部遍历划分完成得到若干段视频序列。4.根据权利要求2所述的一种移动图像的采集分析方法，其特征在于，所述步骤S300包括：步骤S301：将每一段视频序列内的每一图像帧进行图像对角线连接，连接得到两条对角线，将两条图像对角线的相交点作为目标基准点，根据图像帧的高宽选定半径值R，形成焦点目标区域＝πR2；步骤S302：对每一段视频序列中各图像帧焦点目标区域内涵盖的不同景物轮廓面积进行计算，将图像帧焦点目标区域内涵盖面积最大的景物轮廓作为所述图像帧的目标景物；若一段视频序列中各图像帧的目标景物总数为1，则在该段视频序列中选取在焦点目标区域内涵盖目标景物面积最大的一图像帧作为该段视频序列内的期望图像；若所述目标区域内涵盖目标景物面积最大的一图像帧模糊，在该段视频序列中选取在焦点目标区域内涵盖目标景物面积第二大的一图像帧作为该段视频序列内的期望图像，以此类推，最终得到该段视频序列数量为1的期望图像；步骤S303：若一段视频序列中各图像帧出现的目标景物总数大于等于2，按照时间序列分别提取涵盖所述目标景物的各图像帧；针对其中一目标景物A，若目标景物皆为A的各图像帧为在时间上连续的图像帧，且连续图像帧的帧数大于设定的帧数阈值，在所述连续图像帧中选取在焦点目标区域内涵盖所述A面积最大的一图像帧作为该段视频序列内的一期望图像，以此类推，最终得到该段视频序列数量大于或等于1的期望图像。5.根据权利要求4所述的一种移动图像的采集分析方法，其特征在于，所述步骤S400是指对所述步骤S303中出现总数大于等于2的各目标景物进行进一步的运动情况识别：步骤S401：对应获取所述步骤S303中出现目标景物A的连续图像帧，记所述连续图像帧内的一图像帧为f
n
，其相邻一图像帧...

【专利技术属性】
技术研发人员：曹栋亮，孙伟，
申请(专利权)人：上海韦地科技集团有限公司，
类型：发明
国别省市：