System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 视频通话验证方法、装置、电子设备、介质及产品制造方法及图纸_技高网

视频通话验证方法、装置、电子设备、介质及产品制造方法及图纸

技术编号:43590708 阅读:6 留言:0更新日期:2024-12-11 14:42
本申请提供一种视频通话验证方法、装置、电子设备、介质及产品,属于互联网技术领域,方法包括:将待验证通话视频输入至虚假通话视频识别模型,得到初始验证结果;虚假通话视频识别模型基于识别代价参量以及特征距离限定对初始模型进行训练得到;识别代价参量基于样本通话视频的真实类型与识别类型的偏差确定;特征距离限定用于限定真实视觉特征与虚假视觉特征的特征距离;真实视觉特征与虚假视觉特征均是对样本通话视频进行特征提取得到的;初始模型用于识别通话视频为真实或虚假;若初始验证结果为待验证通话视频属于虚假的类型,对待验证通话视频进行二次验证,得到待验证通话视频的目标验证结果。本申请可提高虚假视频通话识别时的处理效率。

【技术实现步骤摘要】

本申请涉及互联网,尤其涉及一种视频通话验证方法、装置、电子设备、介质及产品


技术介绍

1、随着通信技术的飞速发展,视频通话已成为人们日常生活中不可或缺的一部分。然而,随着人工智能技术的不断进步,虚假通话视频即利用人工智能技术合成的通话视频,逐渐浮出水面,给社会带来了严重的安全隐患。

2、现有技术中,通过多个识别模型(如语音特征识别、面部表情特征识别、人体动作特征识别等模型)以及特效标签库的使用,实现对虚假通话视频的识别,但这种方式由于处理流程非常复杂,导致当前进行虚假视频通话识别时的处理效率低。


技术实现思路

1、本申请提供一种视频通话验证方法、装置、电子设备、介质及产品,用以解决现有对虚假通话视频进行识别的方式由于处理流程非常复杂,导致进行虚假视频通话识别时的处理效率低的问题,实现提高虚假视频通话识别时的处理效率。

2、本申请提供一种视频通话验证方法,所述方法包括:获取待验证通话视频;将所述待验证通话视频输入至虚假通话视频识别模型,得到所述虚假通话视频识别模型输出的初始验证结果;其中,所述虚假通话视频识别模型是基于识别代价参量以及特征距离限定对初始模型进行训练得到的;所述识别代价参量基于样本通话视频的真实类型与识别类型的偏差确定;所述特征距离限定用于限定真实视觉特征与虚假视觉特征的特征距离;所述真实视觉特征与所述虚假视觉特征均是对所述样本通话视频进行特征提取得到的;所述初始模型用于识别通话视频为真实或虚假;若所述初始验证结果为所述待验证通话视频属于虚假的类型,则对所述待验证通话视频进行二次验证,得到所述待验证通话视频的目标验证结果。

3、根据本申请提供的一种视频通话验证方法,所述虚假通话视频识别模型是通过如下方式得到的:获取初始模型与样本通话视频;所述样本通话视频包括实际通话视频与合成通话视频;所述合成通话视频是通过人工智能根据所述实际通话视频生成的;利用所述初始模型依次对所述实际通话视频和所述合成通话视频进行特征识别,得到所述实际通话视频的真实识别类型和所述合成通话视频的虚假识别类型;根据所述实际通话视频的真实识别类型与实际视频通话的真实类型的真实偏差,以及所述合成通话视频的虚假识别类型与所述合成通话视频的真实类型的虚假偏差,确定识别代价参量;获取特征距离限定;基于所述识别代价参量与所述特征距离限定训练所述初始模型,得到虚假通话视频识别模型;其中,所述真实视觉特征是利用所述初始模型对所述实际通话视频进行特征识别得到的,所述虚假视觉特征是利用所述初始模型对所述合成通话视频进行特征识别得到的。

4、根据本申请提供的一种视频通话验证方法,所述初始模型包括特征识别模块;所述特征距离限定包括真实特征距离代价参量,所述真实特征距离代价参量是通过如下方式确定的:根据每一特征识别模块的真实视觉特征和虚假视觉特征的特征距离,分别确定相应特征识别模块的虚假特征距离代价参量;获取各特征识别模块关联的重要系数;所述重要系数由相应特征识别模块在由各特征识别模块构成的整个特征识别模块中的位置确定;根据各特征识别模块关联的重要系数以及虚假特征距离代价参量,确定各特征识别模块的虚假特征距离代价参量的赋权线性计算参数;基于各赋权线性计算参数,确定真实特征距离代价参量。

5、根据本申请提供的一种视频通话验证方法,还包括用于区分通话视频为实际通话视频或合成通话视频的初级识别模块,以及包括识别能力高于所述初级识别模块的高级识别模块;在对所述待验证通话视频进行二次验证之前,还包括:获取训练实例,所述训练实例包括样本待定通话视频及匹配的实际分类标识和样本置信度;通过初级识别模块对所述样本待定通话视频进行特征识别,得到样本待定通话视频相应的样本视频帧特征;根据所述样本视频帧特征对所述样本待定通话视频进行视频通话分类结果推测,得到推测分类标识和推测置信度;根据所述样本视频帧特征的序列信息和所述推测置信度,计算所述样本视频帧特征针对所述样本待定通话视频的视频通话分类结果推测的样本可靠性系数;其中,所述样本视频帧特征包括根据初级识别模块的多个特征抽取器依次对所述样本待定通话视频执行特征识别得到的,各特征抽取器相应的多个像素级的样本视频帧特征;从多个特征抽取器中确定目标特征抽取器;根据所述目标特征抽取器提取的样本视频帧特征相应的样本可靠性系数,对所述目标特征抽取器的多个像素级的样本视频帧特征执行聚类操作,生成用于描述样本待定通话视频归类于推测分类标识的样本摘要内容;其中,训练实例还包括所述样本待定通话视频相应的视频通话分类结果摘要内容;根据所述视频通话分类结果摘要内容和所述样本摘要内容生成摘要内容集合;从所述摘要内容集合中确定目标摘要内容;根据所述目标摘要内容,生成指示所述样本待定通话视频的样本特征图;将所述样本待定通话视频和样本特征图进行整合操作,得到整合后待定通话视频;通过高级识别模块根据整合后待定通话视频对所述样本待定通话视频进行高级视频通话分类结果推测,得到目标推测分类标识;确定所述推测分类标识和所述实际分类标识之间的误差,得到实际代参量,以及确定目标推测分类标识和所述实际分类标识之间的误差,得到推测代参量;根据所述实际代参量优化初级识别模块的网络架构,以及根据所述推测代参量优化高级识别模块的网络架构,直至达到预置状态。

6、根据本申请提供的一种视频通话验证方法,所述对所述待验证通话视频进行二次验证,得到所述待验证通话视频的目标验证结果,包括:对所述待验证通话视频进行特征识别,得到视频帧特征;所述视频帧特征包括面部表情特征、眼神特征、音频异常特征中的至少一项;利用初级识别模块根据所述视频帧特征进行视频分类,得到分类结果;所述分类结果包括分类类型及其分类系数;根据所述视频帧特征与所述分类系数进行视频分类,得到所述待验证通话视频的目标验证结果。

7、根据本申请提供的一种视频通话验证方法,所述根据所述视频帧特征与所述分类系数进行视频分类,得到所述待验证通话视频的目标验证结果,包括:根据所述视频帧特征的序列信息和所述分类系数,确定所述视频帧特征针对所述待验证通话视频的分类的可靠性系数;根据所述可靠性系数对所述视频帧特征进行聚类操作并基于聚类结果生成用于描述待验证通话视频为相应视频通话分类结果的摘要内容;利用高级识别模块根据所述摘要内容对所述待验证通话视频进行视频分类,得到所述待验证通话视频的目标验证结果。

8、根据本申请提供的一种视频通话验证方法,在得到所述待验证通话视频的目标验证结果之后,还包括以下至少一项:根据所述目标验证结果,确定与所述待验证通话视频被识别为目标视频通话的分类结果对应的目标待定通话视频,并对所述目标待定通话视频进行标记;根据所述目标验证结果,将所述待验证通话视频发送到与所述待验证通话视频被识别为目标视频通话的分类结果对应的隔离服务器;根据所述目标验证结果,生成与所述待验证通话视频被识别为目标视频通话的分类结果对应的告警弹窗。

9、本申请还提供一种视频通话验证装置,包括:获取模块,用于获取待验证通话视频;第一分类模块,用于将所述待本文档来自技高网...

【技术保护点】

1.一种视频通话验证方法,其特征在于,所述方法包括:

2.根据权利要求1所述的视频通话验证方法,其特征在于,所述虚假通话视频识别模型是通过如下方式得到的:

3.根据权利要求2所述的视频通话验证方法,其特征在于,所述初始模型包括特征识别模块;所述特征距离限定包括真实特征距离代价参量,所述真实特征距离代价参量是通过如下方式确定的:

4.根据权利要求1所述的视频通话验证方法,其特征在于,还包括用于区分通话视频为实际通话视频或合成通话视频的初级识别模块,以及包括识别能力高于所述初级识别模块的高级识别模块;在对所述待验证通话视频进行二次验证之前,还包括:

5.根据权利要求4所述的视频通话验证方法,其特征在于,所述对所述待验证通话视频进行二次验证,得到所述待验证通话视频的目标验证结果,包括:

6.根据权利要求5所述的视频通话验证方法,其特征在于,所述根据所述视频帧特征与所述分类系数进行视频分类,得到所述待验证通话视频的目标验证结果,包括:

7.根据权利要求1-6任一项所述的视频通话验证方法,其特征在于,在得到所述待验证通话视频的目标验证结果之后,还包括以下至少一项:

8.一种视频通话验证装置,其特征在于,包括:

9.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述视频通话验证方法。

10.一种介质,所述介质为非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述视频通话验证方法。

11.一种产品,所述产品为计算机程序产品,包括计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述视频通话验证方法。

...

【技术特征摘要】

1.一种视频通话验证方法,其特征在于,所述方法包括:

2.根据权利要求1所述的视频通话验证方法,其特征在于,所述虚假通话视频识别模型是通过如下方式得到的:

3.根据权利要求2所述的视频通话验证方法,其特征在于,所述初始模型包括特征识别模块;所述特征距离限定包括真实特征距离代价参量,所述真实特征距离代价参量是通过如下方式确定的:

4.根据权利要求1所述的视频通话验证方法,其特征在于,还包括用于区分通话视频为实际通话视频或合成通话视频的初级识别模块,以及包括识别能力高于所述初级识别模块的高级识别模块;在对所述待验证通话视频进行二次验证之前,还包括:

5.根据权利要求4所述的视频通话验证方法,其特征在于,所述对所述待验证通话视频进行二次验证,得到所述待验证通话视频的目标验证结果,包括:

6.根据权利要求5所述的视频通话验证方法,其特征在于,所述根据所述...

【专利技术属性】
技术研发人员:童铮郭岳钟储建潘宇虹杨巧节陈健飞
申请(专利权)人:中国移动通信集团浙江有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1