应用于多目相机的视频同步方法技术

本发明专利技术公开了一应用于多目相机的视频同步方法，所述多目相机包括第一数据获取设备和第二数据获取设备。所述方法包括步骤：获取由所述第一数据获取设备在特定时间段内采集的第一视频数据和由所述第二数据获取设备在该特定时间段内采集的第二视频数据，所述第一视频数据和所述第二视频数据包括一系列图像帧；以及，波形同步所述第一视频数据和所述第二视频数据。这样，在通过硬件设备对所述第一视频数据和所述第二视频数据进行波形同步。数据和所述第二视频数据进行波形同步。数据和所述第二视频数据进行波形同步。

【技术实现步骤摘要】
应用于多目相机的视频同步方法
[0001]本申请是中国申请号为201711346530.1、专利技术名称为“应用于多目相机的视频同步方法”的专利申请的分案申请。


[0002]本专利技术涉及一视频
，尤其涉及一适用于多目相机的视频同步方法，所述视频同步方法同步至少两数据获取设备在同一时刻获取的视频数据，从而提高融合视频的视频质量。

技术介绍

[0003]随着摄像领域的不断发展，通过单一摄像头获取图像或视频数据的方式已经不足以满足市场需求了。或者说，单一摄像头已经不能满足一些特殊场景的拍摄需求了。越来越多的应用场景都需要两个，三个甚至多个摄像头同时工作，同时获取数据，并对这些数据进行综合处理。为了满足这些特殊场景的需求，多目相机得到了越来越多的关注，多目相机指的是同时包括多个摄像头或多个相机的设备，比如双目，TOF相机，全景相机在广义程度上都可被认为是多目相机。
[0004]多目相机在很多
都有广泛的应用，以多目相机被应用于机器视觉技术为例，机器视觉在人类生活中已经扮演着越来越重要的角色。类似航拍无人机的自动跟踪及避障，AR(Augmented Reality)，VR(Virtual Reality)，ADAS(Advanced Driver Assistant System)及SLAM(Simultaneous Localization And Mapping)等领域都需要用到这项技术，在机器视觉中必不可少的功能就是深度感知。而与深度感知相关的双目、结构光或TOF等技术的典型应用中，一般都需要动用到多个相机。或者以多目相机被应用于全景拍摄为例，全景拍摄往往也需要多个相机同时获取同一场景不同角度的数据，并对这些数据进行拼接处理，从而得到满足视觉需求的全景图像。在这些场景中都无可避免地需要应用到多目相机。
[0005]在多目相机的实际应用中，多目相机的多个数据获取设备获取同一时刻同一场景的数据，当然，不同数据获取设备可获取相同的数据，也可获取不同的数据，随后多目相机或者其他数据处理设备对这些数据进行融合处理，并得到满足实际需求的图像或视频数据。在多目相机的数据处理过程中，非常重要的一步就是同步处理获取得到的数据，具体而言，同步处理的过程就是同步多个数据获取设备获取的数据，以得到同一时刻的融合数据。
[0006]然而由于多目相机中的多个数据获取设备彼此之间可能存在时延，时钟设置不一致等问题，而导致目前多目相机的数据融合效果并不尽如人意，从而限制了多目相机的普及应用。特别是当多目相机被应用于拍摄视频时，不同视频数据的融合问题更为突出。具体而言，多个数据获取设备获取同一时间段的同一场景的视频数据，在视频数据的融合过程中，需要对应每一个时间点不同数据获取设备获取的帧数据，而一旦某些帧数据发生错位或者丢失时，将极大程度地影响最终的视频质量。举例来说，由于视频同步方法的缺陷，一个数据获取设备获取的第一帧数据可能会对应于另一个数据获取设备获取的第二帧数据，这样得到的融合数据会偏移实际场景。
[0007]在一些现有技术中，选择牺牲不同步的视频数据的方式来保证得到同步的融合视频。具体而言，在一些现有技术的视频处理过程中，只截取一部分被同步的视频数据，而抛弃不被同步的视频数据，这种方式大大地浪费了视频数据的利用率。在另一些现有技术中，选择降低视频数据质量的方式来得到视频，这种方式极大程度地影响了融合视频的观赏质量以及后续的数据利用。
[0008]综上所述，由于多目相机中的不同数据获取设备的工作性能，相机参数都不尽相同，如果保证不同数据获取设备获取的数据被同步依旧是多目相机的视频同步过程中亟待解决的问题。

技术实现思路

[0009]本专利技术的目的在于提供一应用于多目相机的视频同步方法，其中，所述视频同步方法同步至少两数据获取设备分别获取的视频数据，以提高融合视频的视频质量。
[0010]本专利技术的目的在于提供一应用于多目相机的视频同步方法，其中，所述视频同步方法同步至少两数据获取设备在同一时刻获取的视频数据，从而提高融合视频的视频质量。
[0011]本专利技术的目的在于提供一应用于多目相机的视频同步方法，其中，所述视频同步方法解决由于不同数据获取设备彼此之间存在的时延而引起的视频质量的损失，换言之，所述视频同步方法弥补不同数据获取设备在获取视频数据时存在的偏差。
[0012]本专利技术的目的在于提供一应用于多目相机的视频同步方法，其中，所述视频同步方法结合硬件同步以及软件同步的方式，进一步地提高或优化数据同步的精度，以此方式提高同步数据的质量。
[0013]本专利技术的目的在于提供一应用于多目相机的视频同步方法，其中，所述视频同步方法同时同步不同视频数据的波形以及时间帧，从而得到高精度以及高同步率的同步数据。
[0014]本专利技术的目的在于提供一应用于多目相机的视频同步方法，其中，所述视频同步方法通过软件同步的方式同步不同视频数据的时间帧，换言之，所述视频同步方法可在嵌入式端完成视频同步，从而优化多目相机在嵌入式端的实际应用。
[0015]本专利技术的目的在于提供一应用于多目相机的视频同步方法，其中，所述视频同步方法可被适用于多类型的多目相机，换言之，所述视频同步方法的应用范围广。
[0016]本专利技术的目的在于提供一应用于多目相机的视频同步方法，其中，所述视频同步方法可使得所述多目相机最终得到高精度高同步率的视频，从而提高了用户的使用体验度，并且提高了视频数据的后续利用率。
[0017]本专利技术的目的在于提供一应用于多目相机的视频同步方法，其中，所述视频同步方法提高了视频的实时性，即所述视频同步方法可解决视频在播放时的延时，卡顿等问题。
[0018]本专利技术的目的在于提供一应用于多目相机的视频同步方法，其中，所述视频同步方法的视频同步精度可根据实际需要调节，即所述视频数据的同步精度可控。
[0019]本专利技术的目的在于提供一应用于多目相机的视频同步方法，其中，所述视频同步方法不影响视频数据质量，换言之，所述视频同步方法可保证所述视频数据的完整性。
[0020]为了实现以上任一专利技术目的，本专利技术提供一应用于多目相机的视频同步方法，其
中所述多目相机包括至少一第一数据获取设备以及至少一第二数据获取设备，包括以下步骤：
[0021]S1：获取至少一第一视频数据以及至少一第二视频数据，其中所述第一数据获取设备得到所述第一视频数据，所述第二数据获取设备获取所述第二视频数据；
[0022]S2：至少一硬件同步设备波形同步所述第一视频数据以及所述第二视频数据；以及
[0023]S3：至少一软件同步设备时间戳同步所述第一视频数据以及所述第二视频数据，以得到至少一同步数据。
[0024]在一些实施例中，其中，所述视频同步方法进一步包括以下步骤：
[0025]S4：所述软件同步设备帧掩码所述第一视频数据以及所述的第二视频数据。
[0026]在一些实施例中，其中，所述视频同步方法进一步包括以下步骤：
[0027本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种应用于多目相机的视频同步方法，所述多目相机包括第一数据获取设备和第二数据获取设备，其特征在于，包括：获取由所述第一数据获取设备在特定时间段内采集的第一视频数据和由所述第二数据获取设备在该特定时间段内采集的第二视频数据，所述第一视频数据和所述第二视频数据包括一系列图像帧；以及波形同步所述第一视频数据和所述第二视频数据。2.根据权利要求1所述的应用于多目相机的视频同步方法，其中，波形同步所述第一视频数据和所述第二视频数据，包括：通过硬件同步设备分别对所述第一视频数据和所述第二视频数据中的各个图像帧进行波形解析，以将所述第一视频数据以第一视频波形表示和将所述第二视频数据以第二视频波形表示，其中，在所述第一视频波形中所述第一视频数据的每一图像帧以一个独立的波峰表示，在所述第二视频波形中所述第二视频数据的每一图像帧以一个独立的波峰表示；以及波形同步所述第一视频波形以及所述第二视频波形，以使得所述第一视频波形中的各个波峰对应于所述第二视频波形中的各个波峰。3.根据权利要求2所述的应用于多目相机的视频同步方法，其中，所述第一数据获取设备的帧速率与所述第二数据获取设备的帧速率相同。4.根据权利要求1所述的应用于多目相机的视频同步方法，进一步包括：时间戳同步经波形同步后的所述第一视频数据和所述第二视频数据。5.根据权利要求4所述的应用于多目相机的视频同步方法，其中，时间戳同步所述第一视频数据和所述第二视频数据，包括：分别以第一时间标记标记所述第一视频数据的每一图像帧和以第二时间标记标记所述第二视频数据的每一图像帧；以及基于所述第一时间标记和所述第二时间标记，同步所述第一视频数据和所述第二视频数据中的一系列图像帧。6.根据权利要求5所述的应用于多目相机的视频同步方法，其中，基于所述第一时间标记和所述第二时间标记，同步所...

【专利技术属性】
技术研发人员：胡进，黄仕贵，陈立刚，
申请(专利权)人：浙江舜宇智能光学技术有限公司，
类型：发明
国别省市：