System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 智能VR眼镜系统技术方案_技高网

智能VR眼镜系统技术方案

技术编号:40364992 阅读:10 留言:0更新日期:2024-02-20 22:12
本发明专利技术公开了智能VR眼镜系统,涉及VR眼镜巡检技术领域,本发明专利技术通过设置轨道巡检模块对夜晚佩戴VR眼镜巡检城市轨道的工作人员的VR眼镜前方的实时的现实环境的图像进行采集,目标识别模块基于异常目标识别模型对城市轨道内静态的异常目标进行识别,目标定位单元对工作人员视野的偏向角度、偏向位移进行获取并确定其在水平和竖直方向上的偏转方向,目标定位单元生成对应的引导视频引导工作人员进行视角回溯,引导工作人员快速找到被识别出的异常目标,避免了在夜间可视条件差且经过长时间的巡检下工作人员对于一些静态的异常目标无法第一时间观察到导致无法快速找到异常目标情况的发生,提高了巡检的质量和效率。

【技术实现步骤摘要】

本专利技术涉及vr眼镜巡检,具体涉及智能vr眼镜系统。


技术介绍

1、随着城市轨道交通网络增长迅速,大量轨道交通基础设施相继进入养护期,线路安全和监测面临压力逐渐增大。保证轨道交通的安全运行是最重要的事,目前轨道交通运维方式还是以巡检为主,这也是确保轨道交通安全运行最基础、最关键的方式。而传统的轨道巡检方式是“人+轨道车”的集合模式,随着vr技术的发展,vr技术也应用在轨道巡检中,工作人员通过佩戴vr眼镜,由vr眼镜辅助工作人员进行轨道巡检,

2、然而,夜间巡检的可视条件差,外加工作人员长时间的巡检下对于一些静态的异常目标无法第一时间观察到,vr眼镜捕捉画面并对其识别分析出异常目标时由于工作人员在巡检的过程中一边行走一边四处查看,所以导致vr眼镜在识别异常目标向工作人员发出提示时,工作人员已经离开了异常目标所在位置,此时工作人员得到提示再回去寻找无法快速的找到异常目标;

3、为了解决上述问题,本专利技术提出了一种解决方案。


技术实现思路

1、本专利技术的目的在于提供智能vr眼镜系统,解决现有技术中由于夜间巡检的可视条件差外加工作人员长时间的巡检下对于一些静态的异常目标无法第一时间观察到,vr眼镜捕捉画面并对其识别分析出异常目标时由于工作人员在巡检的过程中一边行走一边四处查看,所以导致vr眼镜在识别异常目标向工作人员发出提示时,工作人员视角已经离开了发现异常目标所在位置,此时工作人员得到提示再寻找无法快速的找到异常目标的问题;

2、本专利技术的目的可以通过以下技术方案实现:

3、智能vr眼镜系统,其特征在于:

4、轨道巡检模块,用于对夜晚佩戴vr眼镜巡检城市轨道的工作人员的vr眼镜前方的实时的现实环境的图像进行采集,所述轨道巡检模块包括若干个巡检单元,一个所述巡检单元对应一个夜晚佩戴vr眼镜巡视城市轨道的工作人员;

5、所述巡检单元对当前时刻对应夜晚佩戴vr眼镜巡视城市轨道的工作人员的vr眼镜前方的现实环境的图像进行采集获取当前时刻该工作人员的巡视图像数据并记录该巡视图像数据的采集时刻,所述巡视单元依据当前该工作人员的巡视图像数据和其对应的采集时刻生成当前时刻该工作人员的巡视记录数据;

6、目标识别模块,对工作人员的巡视图像数据中出现的静态的异常目标进行识别,所述目标识别模块中存储有异常目标识别模型,所述异常目标识别模型是用来对图像进行异常目标识别并将识别出的异常目标采用语义分割标注法对构成其的所有像素点采用同一种颜色进行标示;

7、所述目标识别模块将接收到的当前时刻该工作人员的巡视记录数据内携带的该工作人员的巡视图像数据输入到异常目标识别模型中,若当前时刻该工作人员的巡视图像数据中不存在异常目标,则将当前时刻该工作人员的巡视记录数据进行临时存储;反之,所述目标识别模块依据当前时刻该工作人员的巡视记录数据生成该工作人员的异常目标特征数据并生成目标告警指令;

8、定位引导模块,用于对工作人员进行异常目标定位引导,所述定位引导模块包括目标定位单元和目标引导单元,所述目标定位单元接收到传输的目标告警指令后采用语音播报的形式提示该工作人员发现异常目标并记录语音播报对应的时刻,所述目标定位单元按照一定的生成规则生成该工作人员基于当前位置的异常目标定位数据;

9、所述目标引导单元依据接收到的该工作人员基于当前位置的一场目标定位数据按照一定的引导步骤引导该工作人员快速找到被识别出的异常目标。

10、进一步的,所述生成的该工作人员异常目标特征数据中携带的该工作人员的巡视图像数据中构成异常目标的所有像素点已经被异常目标识别模型采用同一种颜色进行标示了。

11、进一步的,所述目标定位单元生成该工作人员基于当前位置的异常目标定位数据的具体生成规则如下:

12、s11:所述目标定位单元将该工作人员异常目标特征数据中携带的巡视图像数据采集时刻,标定为定位起始时刻,标记为a1,将语音播报对应的时刻标定为定位终止时刻,标记b1;

13、s12:获取该工作人员从定位起始时刻a1到定位终止时刻b1内的所有巡视图像数据,并按照获取到的每个巡视图像数据对应的采集时刻距离当前时刻的远近顺序,从远到近依次将所有的巡视图像数据标记为c1、c2、...、cc,c≥1;

14、s13:按照一定的获取规则获取巡视图像数据c1的第一定位偏向区域和巡视图像数据c2的第二定位偏向区域,具有如下:

15、s131:遍历巡视图像数据c1和c2中的所有像素点,获取巡视图像数据c1中的所有偏向特征区域d1、d2、...、dd,获取巡视图像数据c2中的所有偏向特征区域e1、e2、...、ed,这里需要说明的是偏向特征区域内不包含构成异常目标的像素点;

16、所述偏向特征区域d1、d2、...、dd和偏向特征区域e1、e2、...、ed一一对应,即巡视图像数据c1中的偏向特征区域中的任意一个像素点在巡视图像数据c2的对应偏向特征区域内都存在唯一一个像素点和其rgb值相同;

17、s132:获取巡视图像数据c1中的偏向特征区域d1、d2、...、dd中像素点数量最多的偏向特征区域,将其重新标定为第一定位偏向区域,将第一定位偏向区域在巡视图像数据c2中对应的偏向特征区域,重新标定为第二定位偏向区域;

18、s14:按照一定的生成步骤生成基于巡视图像数据c1和c2的偏向引导数据;

19、s15:按照s12到s14分别计算获取基于巡视图像c1和c2、c2和c3、...、cc-1和cc的偏向引导数据并依据其生成该工作人员基于当前位置的异常目标定位数据。

20、进一步的,所述s14生成基于巡视图像数据c1和c2的偏向引导数据的具体生成规则如下:

21、s141:以巡视图像数据c1的左下角为坐标原点建立以像素为单位的xa-ya直角坐标系,横坐标xa与纵坐标ya分别是在其图像数组中所在的行数和列数;

22、以巡视图像数据c2的左下角为坐标原点建立以像素为单位的xb-yb直角坐标系,横坐标xb与纵坐标yb分别是在其图像数组中所在的行数和列数;

23、s142:在xa-ya直角坐标系中,随机获取构成第一定位偏向区域中一个像素点的坐标标记为f1(xa1,ya1),在xb-yb直角坐标系中获取第二定位偏向区域中与该像素点对应的像素点的坐标标记为g1(xb1,yb1);

24、s143:创建基于巡视图像数据c1和c2的空的偏向字典j1;

25、若xa1≥xb1且ya1≥yb1,则分别将键值对“horizontal”:“left”和“vertical”:“down”添加入j1中,此时j1={“horizontal”:

26、“left”,“vertical”:“down”};

27、若xa1≥xb1且ya1<yb1,则分别将键值对“horizontal”:“left”和“vertica本文档来自技高网...

【技术保护点】

1.智能VR眼镜系统,其特征在于,包括:

2.根据权利要求1所述的智能VR眼镜系统,其特征在于,所述生成的该工作人员异常目标特征数据中携带的该工作人员的巡视图像数据中构成异常目标的所有像素点已经被异常目标识别模型采用同一种颜色进行标示了。

3.根据权利要求1所述的智能VR眼镜系统,其特征在于,所述目标定位单元生成该工作人员基于当前位置的异常目标定位数据的具体生成规则如下:

4.根据权利要求3所述的智能VR眼镜系统,其特征在于,所述S14生成基于巡视图像数据C1和C2的偏向引导数据的具体生成规则如下:

5.根据权利要求4所述的智能VR眼镜系统,其特征在于,所述目标引导单元引导该工作人员快速找到被识别出的异常目标的具体引导步骤如下:

【技术特征摘要】

1.智能vr眼镜系统,其特征在于,包括:

2.根据权利要求1所述的智能vr眼镜系统,其特征在于,所述生成的该工作人员异常目标特征数据中携带的该工作人员的巡视图像数据中构成异常目标的所有像素点已经被异常目标识别模型采用同一种颜色进行标示了。

3.根据权利要求1所述的智能vr眼镜系统,其特征在于,所述目标定位单元生成该工...

【专利技术属性】
技术研发人员:李芃王华单晓伟
申请(专利权)人:迈特诺马鞍山特种电缆有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1