视频处理方法及装置制造方法及图纸

本说明书提供视频处理方法及装置，其中所述视频处理方法包括：获取目标动作关联的视频帧序列以及所述视频帧序列对应的多个关键点；根据所述视频帧序列在所述多个关键点中筛选目标关键点，并确定所述目标关键点对应的目标运动轨迹曲线；根据所述目标运动轨迹曲线在所述视频帧序列中确定目标视频帧，创建所述目标视频帧对应的状态特征值和状态变化信息；根据所述状态特征值和所述状态变化信息构建所述目标动作的动作状态。目标动作的动作状态。目标动作的动作状态。

【技术实现步骤摘要】
视频处理方法及装置


[0001]本说明书涉及视频处理
，特别涉及一种视频处理方法。本说明书同时涉及一种视频处理装置，一种计算设备，以及一种计算机可读存储介质。

技术介绍

[0002]随着AI智能运动的普及，对于动作的计时计数功能使用频繁程度愈发加深，以用于在不同场景下实现对动作的监督。目前用于动作计时计数的方法主要是基于状态机实现，状态机的原理是将一个动作抽象为一组关键帧的有序队列，每一个关键帧即为一个重要状态。而状态机若想要实现动作的计数，就需要在准备阶段完成动作的抽取操作以定义状态机的状态。但是现有技术中，在进行状态定义时，大多数采用人工参与的方式完成，该过程将会消耗大量的时间成本和计算资源成本，因此亟需一种有效的方案以解决上述问题。

技术实现思路

[0003]有鉴于此，本说明书实施例提供了一种视频处理方法。本说明书同时涉及一种视频处理装置，一种计算设备，以及一种计算机可读存储介质，以解决现有技术中存在的技术缺陷。
[0004]根据本说明书实施例的第一方面，提供了一种视频处理方法，包括：
[0005]获取目标动作关联的视频帧序列以及所述视频帧序列对应的多个关键点；
[0006]根据所述视频帧序列在所述多个关键点中筛选目标关键点，并确定所述目标关键点对应的目标运动轨迹曲线；
[0007]根据所述目标运动轨迹曲线在所述视频帧序列中确定目标视频帧，创建所述目标视频帧对应的状态特征值和状态变化信息；
[0008]根据所述状态特征值和所述状态变化信息构建所述目标动作的动作状态。
[0009]根据本说明书实施例的第二方面，提供了一种视频处理装置，包括：
[0010]获取模块，被配置为获取目标动作关联的视频帧序列以及所述视频帧序列对应的多个关键点；
[0011]确定模块，被配置为根据所述视频帧序列在所述多个关键点中筛选目标关键点，并确定所述目标关键点对应的目标运动轨迹曲线；
[0012]创建模块，被配置为根据所述目标运动轨迹曲线在所述视频帧序列中确定目标视频帧，创建所述目标视频帧对应的状态特征值和状态变化信息；
[0013]构建模块，被配置为根据所述状态特征值和所述状态变化信息构建所述目标动作的动作状态。
[0014]根据本说明书实施例的第三方面，提供了一种计算设备，包括：
[0015]存储器和处理器；
[0016]所述存储器用于存储计算机可执行指令，所述处理器用于执行所述计算机可执行
指令时实现所述视频处理方法的步骤。
[0017]根据本说明书实施例的第四方面，提供了一种计算机可读存储介质，其存储有计算机可执行指令，该指令被处理器执行时实现所述视频处理方法的步骤。
[0018]本说明书提供的视频处理方法，在获取到目标动作关联的视频帧序列及其对应的多个关键点后，为了能够快速且准确的完成目标动作的动作状态构建，可以根据视频帧序列在多个关键点中筛选出目标关键点，并确定目标关键点对应的目标运动轨迹曲线，实现通过运动轨迹曲线可以明确视频帧序列中最能够体现目标动作特征的目标视频帧，之后创建目标视频帧对应的状态特征值和状态变化信息，再根据状态特征值和状态变化信息构建目标动作对应的动作状态即可，以用于下游业务完成对状态机的更新；实现了快速且精准的完成目标动作的动作状态构建，有效的节省了人力资源和时间资源。
附图说明
[0019]图1是本说明书一实施例提供的一种视频处理方法的示意图；
[0020]图2是本说明书一实施例提供的一种视频处理方法的流程图；
[0021]图3是本说明书一实施例提供的一种运动轨迹曲线的示意图；
[0022]图4是本说明书一实施例提供的一种视频处理方法的处理流程图；
[0023]图5是本说明书一实施例提供的一种视频处理装置的结构示意图；
[0024]图6是本说明书一实施例提供的一种计算设备的结构框图。
具体实施方式
[0025]在下面的描述中阐述了很多具体细节以便于充分理解本说明书。但是本说明书能够以很多不同于在此描述的其它方式来实施，本领域技术人员可以在不违背本说明书内涵的情况下做类似推广，因此本说明书不受下面公开的具体实施的限制。
[0026]在本说明书一个或多个实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本说明书一个或多个实施例。在本说明书一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本说明书一个或多个实施例中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
[0027]应当理解，尽管在本说明书一个或多个实施例中可能采用术语第一、第二等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本说明书一个或多个实施例范围的情况下，第一也可以被称为第二，类似地，第二也可以被称为第一。取决于语境，如在此所使用的词语“如果”可以被解释成为“在
……
时”或“当
……
时”或“响应于确定”。
[0028]首先，对本说明书一个或多个实施例涉及的名词术语进行解释。
[0029]AI：(Artificial Intelligence，人工智能)是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门新的技术科学。
[0030]状态机：由状态寄存器和组合逻辑电路构成，能够根据控制信号按照预先设定的状态进行状态转移，是协调相关信号动作、完成特定操作的控制中心。有限状态机简写为FSM(Finite State Machine)，主要分为2大类：第一类，若输出只和状态有关而与输入无
关，则称为Moore状态机；第二类，输出不仅和状态有关而且和输入有关系，则称为Mealy状态机。
[0031]在本说明书中，提供了一种视频处理方法，本说明书同时涉及一种视频处理装置，一种计算设备，以及一种计算机可读存储介质，在下面的实施例中逐一进行详细说明。
[0032]实际应用中，在利用状态机完成动作的计时计数时，状态机的主要原理是将一个动作抽象为一组关键帧的有序队列，每一个关键帧即为一个重要状态。例如对开合跳动作进行计数时，不用关注每一帧的动作，而需要注重关注手举到最高双脚张的最开，以及手放到最低双脚并到最拢这两个时刻；当在一定时间内，按序以达到状态机的每一个状态要求(对应开合跳动作的状态要求)，即认为用户完成了一次开合跳动作。不难看出，通过状态机完成动作的计数需要定义动作对应的状态，而现有技术中，大多数采用人工参与的方式完成状态的定义，对计算资源和人力资源的利用较大，因此亟需一种有效的方案以解决上述问题。
[0033]有鉴于此，参见图1所示的示意图，在获取到目标动作关联的视频帧序列及其对应的多个关键点后，为了能够快速且准确的完成目标动作的动作状态构建，可以根据视频帧本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频处理方法，其特征在于，包括：获取目标动作关联的视频帧序列以及所述视频帧序列对应的多个关键点；根据所述视频帧序列在所述多个关键点中筛选目标关键点，并确定所述目标关键点对应的目标运动轨迹曲线；根据所述目标运动轨迹曲线在所述视频帧序列中确定目标视频帧，创建所述目标视频帧对应的状态特征值和状态变化信息；根据所述状态特征值和所述状态变化信息构建所述目标动作的动作状态。2.根据权利要求1所述的方法，其特征在于，所述获取目标动作关联的视频帧序列以及所述视频帧序列对应的多个关键点，包括：获取所述目标动作关联的动作视频，通过对所述动作视频进行分帧处理获得所述视频帧序列；根据预设的关键点识别算法对所述视频帧序列中包含的视频帧分别进行处理，获得每个视频帧对应的子关键点数据；基于每个视频帧对应的子关键点数据确定所述视频帧序列对应的所述多个关键点。3.根据权利要求1所述的方法，其特征在于，所述根据所述视频帧序列在所述多个关键点中筛选目标关键点，并确定所述目标关键点对应的目标运动轨迹曲线，包括：根据所述视频帧序列构建每个关键点对应的运动轨迹曲线，并确定每个关键点对应的运动轨迹曲线的特征信息；根据所述特征信息在所述多个关键点中筛选出所述目标动作关联的所述目标关键点；在每个关键点对应的运动轨迹曲线中确定所述目标关键点对应的所述目标运动轨迹曲线。4.根据权利要求3所述的方法，其特征在于，所述根据所述视频帧序列构建每个关键点对应的运动轨迹曲线，包括：在所述视频帧序列中确定初始视频帧以及关联视频帧；将所述初始视频帧中包含的初始关键点作为基准关键点，以及将所述关联视频帧中包含的关联关键点作为动作关键点；计算所述动作关键点与所述基准关键点的相似度，根据相似度计算结果构建所述多个关键点中每个关键点对应的运动轨迹曲线。5.根据权利要求3所述的方法，其特征在于，所述特征信息包括：关键点特征轨迹变化幅度、关键点特征轨迹周期、关键点特征轨迹极值点；相应的，所述根据所述特征信息在所述多个关键点中筛选出所述目标动作关联的所述目标关键点，包括：在所述多个关键点中，选择所述关键点特征轨迹变化幅度大于预设幅度阈值的关键点作为初始标关键点，以及选择所述关键点特征轨迹周期满足预设周期条件的关键点作为初始标关键点，以及选择所述关键点特征轨迹极值点小于预设极值点数量的关键点作为初始标关键点；计算每个初始关键点对应的目标分值，基于所述目标分值在初始关键点中确定所述目标动作关联的所述目标关键点。6.根据权利要求1所述的方法，其特征在于，所述根据所述目...

【专利技术属性】
技术研发人员：方伟成，
申请(专利权)人：北京卡路里信息技术有限公司，
类型：发明
国别省市：