【技术实现步骤摘要】
本专利技术属于可穿戴引导设备的，具体地涉及一种视障辅助方法、系统及带摄像头的头戴式耳机。
技术介绍
1、视力障碍者在出行上会存在较大的不便，对于视力障碍者来讲，盲道仍是他们出行的必要选择，而且出行还是主要依靠传统导盲杆进行探路，但是现在盲道被占用的现象屡见不鲜，严重影响了视力障碍者的出行，还会给他们的出行造成一定潜在的危险性。
2、随着计算机科学技术的发展和普及，生活越来越智能化，一些弱势群体特别是视力障碍者可以借助越来越成熟的视觉技术方便出行和自理。市场上出现了各种各样的导盲产品，主要有电子类导盲产品，电子类导盲产品主要是以集成超声波测距和语音提示的导盲装置，如导盲杖、导盲帽、导盲筒等，可以探测障碍物体位置。但是，现有电子类导盲产品仅局限于利用超声波探测技术对障碍物的距离进行探测，不能对障碍物所在方位进行精确定位，以及无法知悉障碍物形状，并且只能对单一障碍物进行探测，如在多运动障碍物的探测中，仅仅能够探测到离使用者距离最近的障碍物，因此还得借助手触觉、棍杖敲击等获得更多的特征信息，效果有限。也就是说，现有电子类导盲产品仍存在导盲功能单一、智能化程度不高、实用性较差，难以满足视力障碍者的实际所需。
3、因此，如何解决现有电子类导盲产品普遍存在的导盲功能单一、智能化程度不高及实用性较差的弊端，显得尤为重要。
技术实现思路
1、为了解决上述至少一个技术问题，本专利技术提供了一种视障辅助方法、系统及带摄像头的头戴式耳机，可以实现带摄像头的头戴耳机具备导盲功能完善、
2、第一方面，该申请提供一种视障辅助方法，应用于带摄像头的头戴式耳机；所述方面包括以下步骤：
3、利用头戴式耳机上的摄像头采集穿戴者视野中的周边环境的场景图像；
4、通过识别应用程序针对所述场景图像进行识别处理得到物体数据，其中所述识别处理包括图像增强、前景切分、物体识别的处理方式；
5、将所述物体数据进行编解码生成视障辅助信号，其中所述视障辅助信号包括模拟信号和控制信号；
6、根据所述视障辅助信号执行相应的操作模式，以使穿戴者识别物体及远近；其中所述操作模式包括语音提示模式及振动提醒模式。
7、较佳地，所述利用头戴耳机上的摄像头采集穿戴者视野中的周边环境的场景图像的步骤具体包括：
8、当感知穿戴者介入操作时，测量摄像头离地高度；
9、根据所述离地高度调整所述摄像头相对于头戴式耳机的拍摄角度范围，以找寻穿戴者识别周边环境的最优视野范围；
10、以预设时长间隔通过所述摄像头采集其最优视野范围内的场景图像。
11、较佳地，所述通过识别应用程序针对所述场景图像进行识别处理得到物体数据的步骤具体包括：
12、采用视觉增强算法针对所述场景图像进行图像增强处理；
13、基于仿生原理的注意力算法将增强处理的所述场景图像进行前景切分，得到物体视觉信息；
14、通过识别应用程序处理所述物体视觉信息获取物体数据。
15、较佳地，所述将所述物体数据进行编解码生成视障辅助信号的步骤具体包括：
16、将所述物体数据以预定格式进行编码压缩转化成压缩数据，其中所述预定格式具体为json、xml、yaml中的一种；
17、将所述压缩数据进行解码以还原其原有数据格式得到解码数据；
18、基于数模转换技术将所述解密数据转化成视障辅助信号。
19、较佳地，所述语音提示模式用于提示穿戴者周边所处环境状况，所述振动提醒模式用于根据振动强弱反馈物体远近。
20、较佳地，所述根据所述视障辅助信号执行相应的操作模式的步骤之后，所述方法还包括：
21、将穿戴者得到的物体数据构建虚拟实时周边环境，
22、基于云端技术将所述虚拟实时周边环境共享于关联者；
23、关联者根据所述虚拟实时周边环境修正所述操作模式的参数信息。
24、较佳地，所述识别应用程序的编制包括如下步骤：
25、利用拍摄装置拍摄预设数量的道路图像，其中所述道路图像至少包括红绿灯、盲道、斑马线、路墩中的任意一种；
26、针对所述道路图像中的物体添加标签，其中所述标签的种类包括红灯、绿灯、盲道、斑马线、路墩；
27、基于添加标签的所述道路图像制作数据集，并将所述数据集的格式转化成tfrecord格式得到训练集；
28、利用所述训练集对初始模型进行训练以获取识别应用程序，其中所述初始模型具体为tensorflow框架自带的模型。
29、第二方面，该申请提供了一种视障辅助系统，其包括：
30、采集模块：用于利用头戴式耳机上的摄像头采集穿戴者视野中的周边环境的场景图像；
31、识别模块，用于通过识别应用程序针对所述场景图像进行识别处理得到物体数据；
32、编解码模块，用于将所述物体数据进行编解码生成视障辅助信号；
33、执行模块，用于根据所述视障辅助信号执行相应的操作模式，以使穿戴者识别物体及远近。
34、较佳地，所述采集模块具体包括：
35、测量单元，用于当感知穿戴者介入操作时，测量摄像头离地高度；
36、寻优单元，用于根据所述离地高度调整所述摄像头相对于头戴式耳机的拍摄角度范围，以找寻穿戴者识别周边环境的最优视野范围；
37、采集单元，用于以预设时长间隔通过所述摄像头采集其最优视野范围内的场景图像。
38、较佳地，所述识别模块具体包括：
39、增强单元，用于采用视觉增强算法针对所述场景图像进行图像增强处理；
40、切分单元，用于基于仿生原理的注意力算法将增强处理的所述场景图像进行前景切分，得到物体视觉信息；
41、识别单元，用于通过识别应用程序处理所述物体视觉信息获取物体数据。
42、较佳地，所述编解码模块具体包括：
43、编码单元，用于将所述物体数据以预定格式进行编码压缩转化成压缩数据，其中所述预定格式具体为json、xml、yaml中的一种；
44、解码单元，用于将所述压缩数据进行解码以还原其原有数据格式得到解码数据；
45、数模单元，用于基于数模转换技术将所述解密数据转化成视障辅助信号。
46、较佳地，所述系统还包括：
47、构建模块，用于将穿戴者得到的物体数据构建虚拟实时周边环境，
48、共享模块，用于基于云端技术将所述虚拟实时周边环境共享于关联者；
49、修正模块，用于关联者根据所述虚拟实时周边环境修正所述操作模式的参数信息。
50、第三方面，该申请提供了一种带摄像头的头戴式耳机，包括耳机带、设于所述耳机带两端的听筒、设于其一所述听筒上的摄像头；该头戴耳机还包括处理器、存储器和如上述的所述视障辅助系统，所述视障辅助本文档来自技高网...
【技术保护点】
1.一种视障辅助方法，应用于带摄像头的头戴式耳机；其特征在于，所述方法包括以下步骤：
2.根据权利要求1所述的视障辅助方法，其特征在于，所述利用头戴耳机上的摄像头采集穿戴者视野中的周边环境的场景图像的步骤具体包括：
3.根据权利要求1所述的视障辅助方法，其特征在于，所述通过识别应用程序针对所述场景图像进行识别处理得到物体数据的步骤具体包括：
4.根据权利要求1所述的视障辅助方法，其特征在于，所述将所述物体数据进行编解码生成视障辅助信号的步骤具体包括：
5.根据权利要求1所述的视障辅助方法，其特征在于，所述语音提示模式用于提示穿戴者周边所处环境状况，所述振动提醒模式用于根据振动强弱反馈物体远近。
6.根据权利要求1所述的视障辅助方法，其特征在于，所述根据所述视障辅助信号执行相应的操作模式的步骤之后，所述方法还包括：
7.根据权利要求1至6任一项所述的视障辅助方法，其特征在于，所述识别应用程序的编制包括如下步骤：
8.一种视障辅助系统，其特征在于，所述系统包括：
9.根据权利要求8所述的视
10.一种带摄像头的头戴耳机，包括耳机带、设于所述耳机带两端的听筒、设于其一所述听筒上的摄像头；其特征在于，还包括处理器、存储器和如权利要求8至9任一项所述的视障辅助系统，所述视障辅助系统并能够被所述处理器所执行。
...【技术特征摘要】
1.一种视障辅助方法，应用于带摄像头的头戴式耳机；其特征在于，所述方法包括以下步骤：
2.根据权利要求1所述的视障辅助方法，其特征在于，所述利用头戴耳机上的摄像头采集穿戴者视野中的周边环境的场景图像的步骤具体包括：
3.根据权利要求1所述的视障辅助方法，其特征在于，所述通过识别应用程序针对所述场景图像进行识别处理得到物体数据的步骤具体包括：
4.根据权利要求1所述的视障辅助方法，其特征在于，所述将所述物体数据进行编解码生成视障辅助信号的步骤具体包括：
5.根据权利要求1所述的视障辅助方法，其特征在于，所述语音提示模式用于提示穿戴者周边所处环境状况，所述振动提醒模式用于根据振动强弱...
【专利技术属性】
技术研发人员：龙恩华，林志华，王新海，刘子炎，唐群峰，王国中，范涛，
申请(专利权)人：朝阳聚声泰信丰科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。