直播推流的调控方法、摄像设备及推流系统技术方案

技术编号:36682387 阅读:29 留言:0更新日期:2023-02-27 19:41
本申请涉及直播推流的调控方法、摄像设备及推流系统,属于视频监控技术领域,本申请的方法应用于摄像设备端,包括:对场景视频进行定时截帧,利用鉴黄模型对截帧得到的帧图像进行识别,并根据识别得到的敏感器官置信度值和姿态置信度值进行初次鉴黄判断处理,在判断敏感器官置信度超过第一阈值且姿态置信度超过第二阈值时,基于鉴黄模型对帧图像前预设时长的场景视频进行动作识别,并根据识别得到的动作置信度值进行二次鉴黄判断处理,在判断动作置信度值超过第三阈值时,进行设备状态调整使设备处于禁止推流状态,并重复进行定时截帧步骤及后续步骤。本申请可使降低服务器端计算压力,有利于阳光餐饮的推广。有利于阳光餐饮的推广。有利于阳光餐饮的推广。

【技术实现步骤摘要】
直播推流的调控方法、摄像设备及推流系统


[0001]本申请属于视频监控
,具体涉及一种直播推流的调控方法、摄像设备及推流系统。

技术介绍

[0002]随着社会经济的不断发展,餐饮消费的方式日益多元化与现代化,消费者对餐饮行业食品安全监督及质量控制也日益关注。“阳光餐饮”是通过互联网+的方式,鼓励餐饮经营者通过透明厨房或视频厨房的建设,公开“后厨”环境,让消费者直观了解餐饮的生产制作环境,引导公众直接参与食品安全,让消费者来监督,以促进实现食品安全的根本好转。
[0003]阳光餐饮场景中,对厨房等场所的监控通常以实时推流的方式在网络平台上直播,该过程中,需要对直播内容进行有效监管,快速识别直播中的非法行为或者不正当行为,进而对相应直播使用封禁等处理方式,避免影响扩大。
[0004]相关技术中,对直播视频内容的甄别是在服务器端来集中进行的,该种方式会导致算力集中,随着“阳光餐饮”的推广应用,服务器端会存在很大的计算压力,甚至导致系统崩溃。

技术实现思路

[0005]为至少在一定程度上克服相关技术中存在的问题,本申请提供一种直播推流的调控方法、摄像设备及推流系统,来解决直播推流鉴黄实现中服务器端计算压力大的技术问题。
[0006]为实现以上目的,本申请采用如下技术方案:
[0007]本申请提供一种直播推流的调控方法,其应用于摄像设备端,所述调控方法包括:
[0008]对拍摄到的场景视频进行定时截帧,得到待鉴别的帧图像;
[0009]利用鉴黄模型对所述帧图像进行人体敏感器官识别和骨骼关键点识别,并根据识别得到的敏感器官置信度值和姿态置信度值进行初次鉴黄判断处理,
[0010]在判断所述敏感器官置信度值超过第一阈值且所述姿态置信度值超过第二阈值时,基于所述鉴黄模型对所述帧图像前预设时长的场景视频进行动作识别,并根据识别得到的动作置信度值进行二次鉴黄判断处理,在判断所述动作置信度值超过第三阈值时,进行设备状态调整使设备处于禁止推流状态,并重复进行定时截帧步骤及后续步骤。
[0011]可选地,
[0012]在所述初次鉴黄判断处理过程中,当所述敏感器官置信度值未超过所述第一阈值和/或所述姿态置信度值未超过所述第二阈值时,进行设备状态调整使设备处于直播推流状态,并重复进行定时截帧步骤及后续步骤;
[0013]在所述二次鉴黄判断处理过程中,当所述动作置信度值未超过所述第三阈值时,进行设备状态调整使设备处于直播推流状态,并重复进行定时截帧步骤及后续步骤。
[0014]可选地,所述进行设备状态调整使设备处于禁止推流状态,具体为,在设备的原状
态为禁止推流状态时,维持设备禁止推流状态,在设备的原状态为直播推流状态时,改变设备工作状态为禁止推流状态;
[0015]所述调控方法还包括:在改变设备工作状态为禁止推流状态时,将所述帧图像、所述帧图像前预设时长场景视频以及识别结果信息向服务器端进行上报,以便服务器端进行模型训练素材的积累。
[0016]可选地,还包括:在改变设备工作状态为禁止推流状态时,同时控制设备进行声光报警。
[0017]可选地,所述预设时长基于模型动作识别的需求而设置,且所述预设时长小于直播推流的延时时长。
[0018]可选地,所述鉴黄模型为服务器端下发的训练好的人工智能鉴黄模型;
[0019]所述调控方法还包括:在接收到服务器端下发的新版本模型时,对本地保存的模型进行更新处理。
[0020]可选地,所述鉴黄模型中人体敏感器官识别通路基于目标检测算法或图像分类算法实现,所述目标检测算法包括yolo Mask

rcnn算法,所述图像分类算法包括restnet算法、moblinet算法;
[0021]所述鉴黄模型中骨骼关键点识别通路基于lightweightpose算法、或AlphaPose算法实现;
[0022]所述鉴黄模型中动作识别通路基于slow

fast算法、或ST

GCN算法实现。第二方面,
[0023]本申请提供一种摄像设备,该摄像设备包括:
[0024]存储器,其上存储有可执行程序;
[0025]处理器,用于执行所述存储器中的所述可执行程序,以实现上述所述方法的步骤。
[0026]第三方面,
[0027]本申请提供一种推流系统,该系统包括云服务器和如上述所述的摄像设备;
[0028]所述云服务器,用于与所述摄像设备进行交互,实现鉴黄模型的训练、下发和更新,以及实现阳光餐饮场景下的直播推流服务。
[0029]本申请采用以上技术方案,至少具备以下有益效果:
[0030]本申请的技术方案中,直播推流的调控方法,应用于摄像设备端,该调控方法包括:对拍摄到的场景视频进行定时截帧,得到待鉴别的帧图像;利用鉴黄模型对帧图像进行人体敏感器官识别和骨骼关键点识别,并根据识别得到的敏感器官置信度值和姿态置信度值进行初次鉴黄判断处理,在判断敏感器官置信度值超过第一阈值且姿态置信度值超过第二阈值时,基于鉴黄模型对帧图像前预设时长的场景视频进行动作识别,并根据识别得到的动作置信度值进行二次鉴黄判断处理,在判断动作置信度值超过第三阈值时,进行设备状态调整使设备处于禁止推流状态,并重复进行定时截帧步骤及后续步骤。该技术方案将鉴黄的算法模型集成到摄像设备中,利用边缘计算的方式鉴定推流内容,并基于鉴定结果进行推流调控,这样将鉴定处理分散到终端,有效利用了摄像设备的芯片算力,降低了服务器端的计算压力,有利于阳光餐饮的推广;且算法模型具体采用敏感器官识别、姿态识别及动作识别三个识别通路,有利于在设备有限的算力资源下保证鉴定效能,实现有效调控。
[0031]本专利技术的其他优点、目标,和特征在某种程度上将在随后的说明书中进行阐述,并
且在某种程度上,基于对下文的考察研究对本领域技术人员而言将是显而易见的,或者可以从本专利技术的实践中得到教导。
附图说明
[0032]附图用来提供对本申请的技术方案或现有技术的进一步理解,并且构成说明书的一部分。其中,表达本申请实施例的附图与本申请的实施例一起用于解释本申请的技术方案,但并不构成对本申请技术方案的限制。
[0033]图1为本申请一个实施例提供的直播推流的调控方法的流程示意图;
[0034]图2为本申请一个实施例提供的推流系统的实现流程示意说明图;
[0035]图3为本申请一个实施例提供的摄像设备的结构示意图。
具体实施方式
[0036]为使本申请的目的、技术方案和优点更加清楚,下面将对本申请的技术方案进行详细的描述。显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所得到的所有其它实施方式,都属于本申请所保护的范围。
[0037]如
技术介绍
所述,阳光餐饮场景中,对厨房等场所的监控通常以直播推流本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种直播推流的调控方法,其特征在于,应用于摄像设备端,所述调控方法包括:对拍摄到的场景视频进行定时截帧,得到待鉴别的帧图像;利用鉴黄模型对所述帧图像进行人体敏感器官识别和骨骼关键点识别,并根据识别得到的敏感器官置信度值和姿态置信度值进行初次鉴黄判断处理,在判断所述敏感器官置信度值超过第一阈值且所述姿态置信度值超过第二阈值时,基于所述鉴黄模型对所述帧图像前预设时长的场景视频进行动作识别,并根据识别得到的动作置信度值进行二次鉴黄判断处理,在判断所述动作置信度值超过第三阈值时,进行设备状态调整使设备处于禁止推流状态,并重复进行定时截帧步骤及后续步骤。2.根据权利要求1所述的调控方法,其特征在于,在所述初次鉴黄判断处理过程中,当所述敏感器官置信度值未超过所述第一阈值和/或所述姿态置信度值未超过所述第二阈值时,进行设备状态调整使设备处于直播推流状态,并重复进行定时截帧步骤及后续步骤;在所述二次鉴黄判断处理过程中,当所述动作置信度值未超过所述第三阈值时,进行设备状态调整使设备处于直播推流状态,并重复进行定时截帧步骤及后续步骤。3.根据权利要求2所述的调控方法,其特征在于,所述进行设备状态调整使设备处于禁止推流状态,具体为,在设备的原状态为禁止推流状态时,维持设备禁止推流状态,在设备的原状态为直播推流状态时,改变设备工作状态为禁止推流状态;所述调控方法还包括:在改变设备工作状态为禁止推流状态时,将所述帧图像、所述帧图像前预设时长场景视频以及识别结果信息向服务器端进行上报,以便服务器端进行模型训练素材的积累。4.根据权利要...

【专利技术属性】
技术研发人员:梁强刘一君栾润峰
申请(专利权)人:北京金和网络股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1