通过无线通信频道提供即时图像的方法及系统技术方案

本发明专利技术公布了一种通过无线通信频道提供即时图像的方法及系统，包括采集真实世界环境的360度全景图像，该图像可以是与立体投影一致的360全景；可以通过没有显示器的单次全景视频采集装置执行该采集；可对360度弧形框架进行分析，以确定一对一映射到目标投影上。该目标投影可以是圆柱形或者等矩形投影，立体投影可以在不需要在装置内执行数字拼接操作的情况下即时映射到目标投影上，映射造成的目标投影中的扭曲可以被校正；目标投影可即时通过无线方式传送至与通讯连接的计算机设备的显示器上。

【技术实现步骤摘要】

本专利技术涉及实时流的场，更具体地涉及通过结合有全景视频采集装置的无线通信频道提供即时图像的方法及系统。
技术介绍
在全景照相机中提供高质量的光学器件是具有挑战性的。目前，业界已经采取不同的方法来解决这个问题。其中，一种方法是移动透镜并随着透镜的移动拍摄一组图像，随着时间的推移该组图像覆盖一个视场，来自移动透镜的图像被合并以形成全景场景；另一种方法是形成多个不同照相机的透镜的阵列，并将通过该透镜阵列所拍摄的图像合并成单一的图像，在这种方法中，每个透镜采集全景景色的一部分，这每一部分通过计算合成在一起以形成全景图像；还有一种方法是利用超广角镜头（例如，鱼眼透镜）以采集比正常视场宽的场景；还有一种方法是利用全景光学装置单次（利用单个镜头的离散时间点）产生360度水平视场。后一种方法有时被称作“单次”全景装置，其利用单个镜头在一个时间点采集全景场景。根据使用情况的不同，这些方法中的每一种都具有优缺点。在使用全景光学元件的单次解决方案中，根据情况已经采取了多种方法。经常地，这些元件允许采集环境的单一360度图像，通过这种技术所采集的图像经常与投影（例如，球体，鱼眼）一致，其扭曲环境中的物体的透视图，形状，和尺寸以及环境本身。通常，利用数字信号处理（DSP）技术进行软件修正以减小歪曲并增加图像保真度。但是，软件修正时，修正可被限制并且经常花费时间，导致图像采集和图像显示之间的等待时间较长。
技术实现思路
本专利技术的一个方面可包括一种用于通过结合有全景视频采集装置的无线通信频道提供即时图像的方法，可360度全景可捕获真实世界环境的图像，该图像可以是与立体投影一致的360全景，可以通过没有显示器的单次全景视频采集装置执行该捕获，可对360度弧形框架（arcframe）进行分析，以确定一对一映射到目标投影上。该目标投影可以是圆柱形或者等矩形投影，立体投影可以在不需要在装置内执行数字拼接操作的情况下即时映射到目标投影上，映射造成的目标投影中的扭曲可以被校正，目标投影可即时通过无线方式传送至与通讯连接的计算机设备的显示器上。本专利技术的一个方面可包括一种用于通过结合有全景视频采集装置的无线通信频道提供即时图像的系统。全景视频采集装置内的转换引擎可配置为将视频馈送的每一帧转换成目标投影类型，致使生成用于该视频馈送的每个相应的帧的转换帧，视频馈送的每一帧可与立体投影一致。目标投影类型可以是圆柱形投影或者等矩形投影；该转换可以即时发生。该全景视频采集装置可缺失显示器；该全景视频采集装置可以将转换帧无线地传送至通讯连接的计算机设备，数据存储可配置为存留视频馈送，映射，以及转换帧。本专利技术的一个方面可包括用于通过无线通信频道提供即时图像的全景视频采集装置。该全景视频采集装置可配置为捕获真实世界环境的连续的立体图像，该图像的场可包括负15度至正45度的垂直范围和至少270度的水平范围。该全景视频采集装置可缺失显示器；该全景视频采集装置可包括，能够将图像无线传送至通讯连接的计算机设备的无线传送器，光学透镜组，二次曲面反射器，图像传感器，悬挂的外壳，以及可配置为即时地将真实世界环境的立体图像转换成真实世界环境的连续的等矩形图像的处理器。附图说明图1所示为根据本专利技术实施例所公开的用于通过结合有全景视频采集装置的无限通信频道提供即时图像的相关的实时转换示意图。图2所示为根据本专利技术实施例所公开的用于通过结合有全景视频采集装置的无线通信频道提供即时图像的方法的流程图。图3所示为根据本专利技术实施例所公开的通过结合有全景视频采集装置的无线通信频道提供即时图像的系统的示意图。图4A所示为根据本专利技术实施例所公开的用于通过结合有全景视频采集装置的无线通信频道提供即时图像的全景光学装置的示意图。图4B所示为根据本专利技术实施例所公开的用于通过结合有全景视频捕获装置的无线通信频道提供即时图像的装置的图像堆栈的示意图。附图标记说明：100,110-方案，112-真实世界环境，114-360°视场，116-全景视频采集装置，117-即时图像，118-360°透视图，120-计算机设备，122-界面，124-无线通道，150-即时变换，152-立体投影，154-映射，158-圆柱形投影，156-校正；200-通过结合有全景视频采集装置的无线通信频道提供即时图像的方法，205-识别单次全景视频采集装置，210-建立与该装置有关的观看对话，215-通过该装置采集真实世界环境的360度图像，225-对投影进行分析以确定圆柱形投影的映射，230-在该装置内即时地以及使用最少的资源执行映射转换，235-可选择地建立圆柱形投影，240-在圆柱形投影上可选择地执行扭曲校正操作，245-建立透视图，250-将该透视图通过无线方式即时传送至计算机设备，255-计算机设备呈现该透视图，260-对话终止，265-结束；310-全景视频采集装置，312-硬件，320-处理器，322-总线，324-易失的存储器，326-非易失的存储器，328-无线收发器，340-图像传感器，342-光学堆栈，314-软件/固件，330-转换引擎，332-立体投影，334-圆柱形投影，336-映射，370-即时馈送，360-计算机设备，362-界面，380-资源阈值，382-延迟阈值；432-悬挂的外壳，410-间隔圈，430-反射镜，420-二次曲面反射器，422-孔径，440-光学元件，450-图像传感器，455-连接器，472-孔径光阑，474-元件A，476-元件B，478-元件C，480-元件D，482-元件E，484-元件F，486-滤波器，488-视场致平器，490-传感器。具体实施方式本专利技术是一种用于通过结合有全景视频采集装置的无线通信频道提供即时图像的解决方案。在该方案中，全景视频采集装置可以捕获真实世界环境的即时图像；该装置可以捕获真实世界环境的立体投影，该立体投影可在不进行拼接操作的情况下即时或接近即时地变换成圆柱形投影；该装置可缺失显示器并可将该圆柱形投影（例如，即时图像/馈送）传送至无线通讯连接的计算机设备，该计算机设备可在显示器的界面内呈现该圆柱形投影。所属
的技术人员知道，本专利技术可以实现为系统、方法或计算机程序产品。因此，本专利技术可以具体实现为以下形式，即：可以是完全的硬件、也可以是完全的软件（包括固件、驻留软件、微代码等），还可以是硬件和软件结合的形式，本文一般称为“电路”、“模块”或“系统”。此外，在一些实施例中，本专利技术还可以实现为在一个或多个计算机可读介质中的计算机程序产品的形式，该计算机可读介质中包含计算机可读的程序代码。可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是，但不限于，电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子（非穷举的列表）包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器（RAM）、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本专利技术中，计算机可读存储介质可以是任本文档来自技高网...

【技术保护点】
一种通过无线通信频道提供即时图像的方法，其特征在于，该方法包括：采集真实世界环境的360度全景图像，其中所述图像是360度全景，其中该采集通过单次全景视频采集装置执行；分析360度弧形框架以确定一对一映射至目标投影，其中所述目标投影是圆柱形投影或等矩形投影中的至少一个；在所述全景视频采集装置内在所述360度全景或者所述目标投影上，即时将所述360度全景映射至所述目标投影；校正由所述映射导致的所述目标投影中的扭曲；以及将所述目标投影即时地无线传送至无线连接的计算机设备的显示器上。

【技术特征摘要】
2014.07.23 US 14/339,0831.一种通过无线通信频道提供即时图像的方法，其特征在于，该方法包括：采集真实世界环境的360度全景图像，其中所述图像是360度全景，其中该采集通过单次全景视频采集装置执行；分析360度弧形框架以确定一对一映射至目标投影，其中所述目标投影是圆柱形投影或等矩形投影中的至少一个；在所述全景视频采集装置内在所述360度全景或者所述目标投影上，即时将所述360度全景映射至所述目标投影；校正由所述映射导致的所述目标投影中的扭曲；以及将所述目标投影即时地无线传送至无线连接的计算机设备的显示器上。2.根据权利要求1所述的通过无线通信频道提供即时图像的方法，其特征在于，所述360度全景的几何图形符合立体投影。3.根据权利要求1所述的通过无线通信频道提供即时图像的方法，其特征在于，所述全景视频采集装置没有显示器。4.根据权利要求1所述的通过无线通信频道提供即时图像的方法，其特征在于，该方法还包括：应用平滑功能以平均所述目标投影的像素密度。5.根据权利要求1所述的通过无线通信频道提供即时图像的方法，其特征在于，该方法还包括：确定所述360度全景的从所述投影的中心开始在边界线处结束的径向线；以及将所述360全景进行转换，使得所述径向线变成垂直边界线。6.根据权利要求1所述的通过无线通信频道提供即时图像的方法，其特征在于，所述映射和呈现是在延迟阈值内执行的，其中所述延迟阈值小于100毫秒。7.根据权利要求1所述的通过无线通信频道提供即时图像的方法，其特征在于，该方法还包括：将所述360度全景分割成至少两部分；将所述至少两部分的每一个转换成目标投影类型；将所述至少两部分的每一个传送至所述计算机设备；响应接收所述至少两部分，所述计算机设备对所述至少两部分进行拼接已形成单一的帧。8.一种通过无线通信频道提供即时图像的系统，其特征在于，该系统包括：配置在全景视频采集装置内的转换引擎，所述转换引擎将视频馈送的每一帧转换成目标投影类型，致使为所述视频馈送的每个相应的帧生成转换帧，其中所述视频馈送的每一帧符合360度全景，其中所述目标投影类型是圆柱形投影或等矩形投影的至少一个，所述转换即时发生，所述全景视频采集装置将转换帧无线地传送至通讯连接的计算机设备；配置为存留所述视频，映射，以及所述转换帧的至少一个的数据存储。9.根据权利要求8所述的通过无线通信频道提供即时图像的系统，其...

【专利技术属性】
技术研发人员：彼得阿罗马尼斯，莫伊希斯德拉库鲁兹，塔尔莫尔，邱勒默帕丁，阿密特维马，
申请(专利权)人：威视恩移动有限公司，
类型：发明
国别省市：美国;US