基于视频通信技术的AR信息显示方法和装置制造方法及图纸

本发明专利技术涉及一种基于AR眼镜的物体信息的展示方法，包括，通过通信连接从其他设备获取物体图像，所述物体图像包括物体和背景；将所述物体图像进行缩放操作，使得所述物体尺寸值能够匹配当前环境；其中，所述背景具有的颜色使得所述AR眼镜的显示系统不显示所述背景。通过本发明专利技术的一个或多个实施例，可以无需在AR眼镜端其他AR软件，不用依赖AR眼镜设备本身运算和3D渲染部分的能力限制，而实现AR物体信息的展示。

【技术实现步骤摘要】
基于视频通信技术的AR信息显示方法和装置
本专利技术涉及AR信息显示领域，尤其涉及一种基于视频通信技术的AR信息显示方法和装置。
技术介绍
传统的AR信息显示是通过在客户端(例如AR眼镜)安装AR应用来体验增强内容。这种方式存在两个缺点，1.AR眼镜端需要具有较强的数据处理能力，对于轻量化AR眼镜可能无法完美适配；2.适合AR眼镜端的AR应用需要针对眼镜摄像头和显示做适配开发，很难找到支持适配所有AR眼镜的AR应用。
技术实现思路
本专利技术的目的在于提供一种基于AR眼镜的物体信息的展示方法，包括，通过通信连接从其他设备获取物体图像，所述物体图像包括物体和背景；将所述物体图像进行缩放操作，使得所述物体尺寸值能够匹配当前环境；其中，所述背景具有的颜色使得所述AR眼镜的显示系统不显示所述背景。本专利技术的另一个目的在于提供一种AR眼镜，包括：显示装置，用于显示物体图像；一个或多个摄像头，用于获取当前环境信息；处理器；存储器，所述存储器存储计算机程序，当所述计算机程序被所述处理器执行时，使得所述AR眼镜：通过通信连接从其他设备获取物体图像，所述物体图像包括物体和背景；将所述物体图像进行缩放操作，使得所述物体尺寸值能够匹配当前环境；其中，所述背景具有的颜色使得所述AR眼镜的显示系统不显示所述背景。本专利技术的的优势如下：·本专利技术AR眼镜端无需安装其他AR软件，不用依赖AR眼镜设备本身运算和3D渲染部分的能力限制·本专利技术可以通过现有成熟视频通信技术，更方便的分享、传递、演示AR信息·本专利技术让AR内容不再受设备限制和使用场景限制·本专利技术不受AR眼镜设备个体差异影响。附图说明图1示出了根据本专利技术的一个或多个实施例的AR眼镜的结构示意图；图2示出了根据本专利技术的一个或多个实施例的基于AR眼镜的物体信息的展示方法的流程图；图3示出了根据本专利技术的一个或多个实施例的基于AR眼镜的物体信息的展示方法的示意图；图4示出了根据本专利技术的一个或多个实施例的基于AR眼镜的物体信息的展示方法的流程图；图5示出了根据本专利技术的一个或多个实施例的摄像头FOV和显示装置FOV的示意图；图6示出了根据本专利技术的一个或多个实施例的物体的缩放示意图。具体实施方式为更进一步阐述本专利技术为达成预定专利技术目的所采取的技术手段及功效，以下结合附图及较佳实施例，对依据本专利技术提出的基于视频通信技术的AR信息显示方法和装置的具体实施方式、结构、特征及其功效，详细说明如后。如图1所示，示出了根据本专利技术的一个或多个实施例的AR(AugmentedReality)眼镜100的结构示意图。AR眼镜能够将虚拟的信息叠加到真实世界，使真实世界画面和虚拟画面能够叠加到一起，实现两种信息的相互补充。可以理解的是，一些实施方式中，智能眼镜100为其它类型的眼镜，例如混合现实(MixedReality,MR)眼镜。本领域的技术人员可以理解，本专利技术所述的AR眼镜的形态也可以是非常规眼镜的外观形态，例如可以为头盔、头套等形态的头戴式设备。AR眼镜100可以包括一个或两个显示装置10，显示装置可以采用以棱镜、LCD、光波导、Birdbath、自由曲面反射镜等可以实现半透半反的显示方案。此外，AR眼镜100还可以包括镜架20，在一些实施方式中，可以将智能眼的传感器模块、处理模块、存储模块和电池模块放到镜架20内部，在另一些实施方式中，也可以将传感器模块、处理模块、存储模块和电池模块的一个或多个部件集成在另一个独立的配件(图1中未示出)，并通过数据线和AR眼镜100进行连接。如图2所示，实线框图示出了根据本专利技术的一个或多个实施例的AR信息显示方法的流程图，具体包括，S1、通过通信连接从其他设备获取物体图像，所述物体图像包括物体和背景；S2、将所述物体图像进行缩放操作，使得所述物体尺寸值能够匹配当前环境；其中，所述背景具有的颜色使得所述AR眼镜的显示系统不显示所述背景。具体地，在步骤S1中，通信连接为无线通信连接或有限通信连接方式，其可以基于WIFI、蓝牙、红外等无线或有线的通信协议进行数据传输。在本专利技术的一个或多个实施例中，通过通信连接从其他设备获取的为常规的图像或图像序列。可以理解，当图像序列的帧率达到一定水平(例如>30Hz)的时候，该图像序列可以为视频流的形式，因此可以通过本专利技术的实施例进行视频流的传输。在本专利技术的一个或多个实施例中，如图3所示，物体图像200中包括物体210和背景220。其中，物体背景220为纯黑色，物体210则是一个画框。在附图3的实施例中，选用黑色背景的目的为，在以OLED为光源的显示装置中，纯黑色背景不会使得OLED发光，从而使得在以光波导方案的显示装置中不产生任何颜色。因此，在AR眼镜100的显示装置上，用户仅会看到物体信息210，即图3中的画框，而不会看到背景220。在本专利技术的另一些实施例中，如果AR眼镜的显示装置在显示原理上对白色不显示，则物体图像的背景需要为白色。因此，本专利技术中不限制背景的颜色为附图3的实施例，而只需物体图像的背景具有的颜色使得所述AR眼镜的显示系统不显示所述背景即可。在步骤S2中，将所述物体图像进行缩放操作可以根据用户的控制指令，例如用户通过语音交互或触控交互的方式对物体图像进行放大、缩小。例如，用户可以通过预设的放大指令，对物体图像进行任意百分比的放大，从而使得用户可以将物体的尺寸值匹配当前环境。在一个或多个实施例中，匹配当前环境是指，将AR眼镜获得的物体图像按照用户满意的大小进行显示、或者按照其实际应具有的尺寸大小进行显示。例如针对附图3中的画框，当用户通过AR眼镜100观测画框的时候，可以将显示装置的FOV面对希望摆放画框的墙上进行观测，用户可以通过AR眼镜100内置的交互方式对画框进行缩放，用户可以将画框放大或缩小至满意的位置。由此，用户可以不需要通过实物，而模拟画框摆放的效果。在另一个实施例中，AR眼镜100收到的物体图像可以为图像序列，且该图像序列可以包括物体210的旋转、变化、或替代的图像，由此AR眼镜100的用户可以从各个维度来观察物体210相对于环境的显示效果，而无需AR眼镜100本地的渲染或计算，从而实现物体的3D展示效果。在这个过程中，图片200的背景220的部分应当始终保持黑色，从而使得AR眼镜不显示背景，而不影响AR眼镜用户观察物体。在本专利技术的一个或多个优选的实施方式中，如图1的虚线框所示，基于AR眼镜的物体信息的展示方法还包括步骤S3、计算所述AR眼镜的显示装置和当前环境的尺寸关系，步骤S3具体的实施步骤如图4所示：S31、通过AR眼镜的一个或多个摄像头获取摄像头FOV环境；S32、将所述AR眼镜的显示装置的视场角范围映射到摄像头FOV环境中，获得显示装置FOV环境；S33、使用SLAM算法对显示装置FOV环境进行尺寸测量；S34、根据测量得到的尺寸，计算显示装置的每一个像素点代表的视场角环境的尺寸值。具体地，在步骤S31中，A本文档来自技高网...

【技术保护点】
1.一种基于AR眼镜的物体信息的展示方法，包括，/n通过通信连接从其他设备获取物体图像，所述物体图像包括物体和背景；/n将所述物体图像进行缩放操作，使得所述物体尺寸值能够匹配当前环境；/n其中，所述背景具有的颜色使得所述AR眼镜的显示系统不显示所述背景。/n

【技术特征摘要】
1.一种基于AR眼镜的物体信息的展示方法，包括，
通过通信连接从其他设备获取物体图像，所述物体图像包括物体和背景；
将所述物体图像进行缩放操作，使得所述物体尺寸值能够匹配当前环境；
其中，所述背景具有的颜色使得所述AR眼镜的显示系统不显示所述背景。


2.根据权利要求1所述的方法，其中，
将所述物体图像进行缩放操作，使得所述物体尺寸值能够匹配当前环境，进一步包括：
根据用户的控制指令，对所述物体图像进行缩放操作，使得所述物体尺寸值能够匹配当前环境。


3.根据权利要求1所述的方法，还包括，计算所述AR眼镜的显示装置和当前环境的尺寸关系，具体步骤包括：
通过AR眼镜的一个或多个摄像头获取摄像头FOV环境；
将所述AR眼镜的显示装置的视场角范围映射到摄像头FOV环境中，获得显示装置FOV环境；
使用SLAM算法对显示装置FOV环境进行尺寸测量；
根据测量得到的尺寸，计算显示装置的每一个像素点代表的视场角环境的尺寸值。


4.根据权利要求3所述的方法，其中，
所述SLAM算法包括:使用单目视觉测量算法、双目视觉测量算法、结构光视觉测量算法。


5.根据权利要求3或4所述的...

【专利技术属性】
技术研发人员：赵维奇，
申请(专利权)人：芋头科技杭州有限公司，
类型：发明
国别省市：浙江;33