System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 基于AI视频识别的车载360环视和视频辅助系统技术方案_技高网

基于AI视频识别的车载360环视和视频辅助系统技术方案

技术编号:42487591 阅读:6 留言:0更新日期:2024-08-21 13:05
本发明专利技术提供一种基于AI视频识别的车载360环视和视频辅助系统,涉及视频图像处理技术领域。所述系统包括:摄像头和处理器,处理器用于:接收监测视频帧,检测监测视频帧中的障碍物所在的目标区域;确定障碍物与摄像头之间的检测距离;获取目标特征信息和历史目标特征信息,并确定第一障碍物及其第一数量;判断是否需要重新生成360环视图像;如果不需要,则根据目标区域、历史目标区域和第i‑1个时刻的360环视图像获得第i个时刻的360环视图像。根据本发明专利技术,可在生成360环视图像的必要性不高时,通过对第i‑1个时刻的360环视图像进行调整,生成第i个时刻的360环视图像,从而节省算力,降低算力的浪费。

【技术实现步骤摘要】

本专利技术涉及视频图像处理,尤其涉及一种基于ai视频识别的车载360环视和视频辅助系统。


技术介绍

1、在相关技术中,使用车载360环视和视频辅助系统可帮助驾驶员发现车辆周围的障碍物,提升行车安全性,然而,利用车辆周身设置的多个摄像头拍摄的视频帧合成360环视图像对于算力的消耗较大,并且,在车辆周围的障碍物的位置改变幅度较小的情况下,逐帧生成360环视图像的必要性不高,导致大量算力的浪费。

2、公开于本申请
技术介绍
部分的信息仅仅旨在加深对本申请的一般
技术介绍
的理解,而不应当被视为承认或以任何形式暗示该信息构成已为本领域技术人员所公知的现有技术。


技术实现思路

1、本专利技术提供一种基于ai视频识别的车载360环视和视频辅助系统,能够减少生成360环视图像过程中的算力浪费。

2、根据本专利技术的第一方面,提供一种基于ai视频识别的车载360环视和视频辅助系统,包括:设置在车身的多个位置的摄像头以及处理器;

3、其中,所述摄像头用于拍摄车身周围的监测视频帧,并将视频帧传输至所述处理器;

4、所述处理器用于:

5、在第i个时刻接收各个摄像头拍摄的监测视频帧;

6、通过智能图像检测模型,对各个监测视频帧进行检测处理,获得各个监测视频帧中的障碍物所在的目标区域,其中,所述目标区域为使用障碍物的轮廓的最小外接矩形对障碍物进行框选的矩形框所在的区域;

7、根据各个摄像头的外参,确定各个障碍物与摄像头之间的检测距离

8、通过所述智能图像检测模型,获取各个目标区域的目标特征信息,并获取第i-1个时刻和第i-2个时刻接收到的各个摄像头拍摄的历史监测视频帧中的历史目标区域的历史目标特征信息;

9、根据所述目标特征信息和所述历史目标特征信息,确定在监测视频帧和第i-1个时刻和第i-2个时刻的历史监测视频帧中均出现的第一障碍物;

10、统计各个监测视频帧中的障碍物的第一数量;

11、根据所述目标区域、所述历史目标区域、所述检测距离和所述第一障碍物,确定是否需要重新生成360环视图像;

12、如果不需要重新生成360环视图像,则根据所述目标区域、所述历史目标区域和第i-1个时刻的360环视图像,获得第i个时刻的360环视图像;

13、如果需要重新生成360环视图像,则根据第i个时刻的各个监测视频帧,生成第i个时刻的360环视图像。

14、技术效果:根据本专利技术,可检测各个摄像头在第i个时刻拍摄的监测视频帧中的障碍物,并基于与第i-1个时刻与第i-2个时刻的历史监测视频帧的比较,确定是否需要重新生成360环视图像,从而在生成360环视图像的必要性不高时,通过对第i-1个时刻的360环视图像进行调整,生成第i个时刻的360环视图像,从而节省算力,降低对于算力的浪费。在确定距离需求性评分时,可通过条件函数来确定在监测视频帧检测到的障碍物中,与车辆距离较近且存在安全隐患的障碍物的数量与预设安全数量的比值,进而利用该比值的最大值来描述对于更高精度的360环视图像的最大需求度以及重新生成360环视图像的必要性,提升距离需求性评分的准确性和客观性。在确定第一障碍物需求性评分时,可通过第一障碍物的运动轨迹的规律性,来确定第一障碍物对于重新生成360环视图像的需求度,并利用需求度的最大值来客观描述重新生成360环视图像的必要性,提升了第一障碍物需求性评分的准确性和客观性。在确定第二障碍物需求性评分时,可通过在第i个时刻新出现的第二障碍物的数量占比及其安全性来确定重新生成更高精度的360环视图像,并使驾驶员了解其与车辆之间的相对位置的必要性,提升了第二障碍物需求性评分的准确性和客观性。在确定生成需求性评分时,可基于距离需求性评分、第一障碍物需求性评分和第二障碍物需求性评分所描述的对象,来确定生成需求性评分,使得生成需求性评分准确且客观地描述各个障碍物对于重新生成360环视图像的需求度。

15、应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,而非限制本专利技术。根据下面参考附图对示例性实施例的详细说明,本专利技术的其它特征及方面将更清楚。

本文档来自技高网...

【技术保护点】

1.一种基于AI视频识别的车载360环视和视频辅助系统,其特征在于,包括:设置在车身的多个位置的摄像头以及处理器;

2.根据权利要求1所述的系统,其特征在于,根据所述目标区域、所述历史目标区域、所述检测距离和所述第一障碍物,确定是否需要重新生成360环视图像,包括:

3.根据权利要求2所述的系统,其特征在于,根据各个障碍物与摄像头之间的检测距离和预设的安全距离,确定距离需求性评分,包括:

4.根据权利要求2所述的系统,其特征在于,根据所述检测距离、第一障碍物的目标区域、第一障碍物在第i-1个时刻的历史目标区域以及第一障碍物在第i-2个时刻的历史目标区域,确定第一障碍物需求性评分,包括:

5.根据权利要求4所述的系统,其特征在于,根据所述检测距离、所述第一位置坐标、所述第二位置坐标和所述第三位置坐标,确定第一障碍物需求性评分,包括:

6.根据权利要求2所述的系统,其特征在于,根据所述检测距离、所述第一数量和所述第二数量,确定第二障碍物需求性评分,包括:

7.根据权利要求2所述的系统,其特征在于,根据所述距离需求性评分、所述第一障碍物需求性评分和所述第二障碍物需求性评分,确定生成需求性评分,包括:

8.根据权利要求4所述的系统,其特征在于,如果不需要重新生成360环视图像,则根据所述目标区域、所述历史目标区域和第i-1个时刻的360环视图像,获得第i个时刻的360环视图像,包括:

...

【技术特征摘要】

1.一种基于ai视频识别的车载360环视和视频辅助系统,其特征在于,包括:设置在车身的多个位置的摄像头以及处理器;

2.根据权利要求1所述的系统,其特征在于,根据所述目标区域、所述历史目标区域、所述检测距离和所述第一障碍物,确定是否需要重新生成360环视图像,包括:

3.根据权利要求2所述的系统,其特征在于,根据各个障碍物与摄像头之间的检测距离和预设的安全距离,确定距离需求性评分,包括:

4.根据权利要求2所述的系统,其特征在于,根据所述检测距离、第一障碍物的目标区域、第一障碍物在第i-1个时刻的历史目标区域以及第一障碍物在第i-2个时刻的历史目标区域,确定第一障碍物需求性评分,包括:

【专利技术属性】
技术研发人员:王艳红娄文法张蒙王忍朱前程郝荣博邵帅
申请(专利权)人:徐州众图智控通信科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1