快速视频采集和传感器调节制造技术

描述了用于快速视频传感器调节的系统、方法、装置、媒体和指令。在一个实施例中，具有图像采集能力的便携式电子装置在选择输入按钮时自动采集第一多个帧，同时装置的传感器正在确定环境的相机设置。使用不同的自动包围设置采集第一多个帧。在确定了相机设置之后，使用所确定的相机设置来采集第二多个图像。第一多个图像中的一个或多个与第二多个图像一起用于视频文件。可以基于某些自动包围设置和最终相机设置之间的匹配来选择一个或多个图像。然后，服务器计算机可以聚合来自不同装置的设置，以向各种装置提供更新的自动包围设置。

【技术实现步骤摘要】
快速视频采集和传感器调节本申请是中国专利申请(201780067356.9)的分案申请，原申请的申请日为(2017年11月1日)，优先权日为(2016年11月1日)，专利技术名称为“用于快速视频采集和传感器调节的系统和方法”。优先权本申请要求于2016年11月1日提交的序列号为No.62/415,888的美国专利申请的优先权，其全部内容通过引用合并于此。
技术介绍
使用便携式电子装置记录视觉媒体可以在各种各样的环境条件下执行。诸如智能手机或智能眼镜的一些便携式装置通常不提供用于允许手动调节各种图像采集参数的复杂的控制机制。这可能阻碍了使用此类装置准确地影响用户采集照片和/或视频图像的意图的努力。在一些情况下，这些困难由于诸如通常形成更复杂的单用途数码相机的一部分的感测设备的装置的缺失或者在装置上提供不太复杂或成本较低的感测设备而加剧。此外，利用此类便携式和/或可穿戴式多功能装置拍摄的照片和视频通常在瞬间被采集或者在没有过多的相机参数的预备设置的情况下采集。这些因素可能会导致令人失望的结果，并且在一些情况下会导致非最优的装置上的资源利用率。附图说明附图中的各个附图仅示出了本公开的示例实施例，并且不应被视为限制其范围。图1是根据一个示例实施例的具有快速视频传感器调节功能的具有支持电子技术(electronics-enabled)的眼镜制品形式的便携式电子装置的示意性三维(3D)视图。图2A示出了根据一些实施例的包括具有快速视频传感器调节的装置的系统的各方面。图2B示出了根据一些实施例的包括具有快速视频传感器调节的装置的系统的各方面。图3是根据示例实施例的具有可自动调节的图像采集功能的便携式电子装置的所选功能组件的示意性框图。图4A示出了根据一些示例实施例的用于快速视频传感器调节的方法。图4B示出了根据一些示例实施例的用于生成与快速视频传感器调节一起使用的自动包围设置的方法。图5A是根据一些示例实施例的具有智能手机形式的便携式电子装置的示意性前视图，所述智能手机具有关于图像采集参数执行快速视频采集和传感器调节动作的功能。图5B是根据一些示例实施例的具有智能手机形式的便携式电子装置的示意性前视图，所述智能手机具有关于图像采集参数执行快速视频采集和传感器调节动作的功能。图5C是根据一些示例实施例的具有智能手机形式的便携式电子装置的示意性前视图，所述智能手机具有关于图像采集参数执行快速视频采集和传感器调节动作的功能。图6是示出根据一些示例实施例的可以安装在机器上并用于快速视频传感器调节的软件体系结构的示例的框图。图7示出了根据一些示例实施例的具有计算机系统形式的机器的图形表示，在该计算机系统内可以执行一组指令以使机器执行在此所讨论的方法中的任何一种或多种方法。具体实施方式在此描述的实施例涉及使用资源受限的相机装置(诸如包括相机功能的可穿戴装置)对视频的采集。特定实施例涉及在采集视频的初始帧期间使用自动包围。如下所述，此类自动包围使得能够在资源受限的相机环境中进行快速视频采集和传感器调节，并且进一步允许使用在最终选择相机设置之前采集的视频帧，其将以其它方式被丢弃。以下的描述讨论了本公开的说明性实施例。在以下的描述中，出于解释的目的，阐述了许多具体细节以便提供对所公开主题的各种实施例的理解。然而，对于本领域技术人员显而易见的是，可以在没有这些具体细节的情况下实践所公开主题的实施例。如在此所述，自动包围是指使用不同的相机设置来多次采集图像。自动曝光包围(AEB)是使用不同曝光设置的包围类型。此类设置可以基于目标相机设置，其在由“包围”目标设置的偏移值给出的设置中具有变化。一些相机装置包括被配置为使用此类AEB采集单个图像的多个副本以提供高动态范围图像的硬件。与采集单个图像相反，在此描述的实施例可以利用此类配置来提供对视频采集的改进。在资源受限的摄像机环境中(诸如在可穿戴装置中使用摄像机)资源和存储器受到显著限制。当用户想要开始记录视频时的即时响应是有价值的，但是直到在接收到用户输入之后资源才可用于运行相机。由于此类资源限制，在许多情况下，在用户进行输入选择之前相机不工作，并且因此，装置不具有针对当前环境的适当设置。这会在用户输入后产生延迟，因为相机会调节各种传感器设置，直到针对环境识别出适当的设置。在标准系统中，从激活相机的用户输入到相机确定适当设置的时间导致用户选择和可用于回放或记录的视频的开始时间之间的延迟。在此描述的实施例使用自动包围来在相机确定针对当前环境的适当设置之前使用自动包围设置来采集多个图像(在各种实施例中，例如，3个图像、5个图像、10个图像等等)。这些图像可用于确定适当的设置，并且丢弃由自动包围设置采集的图像生成的劣质图像。在一些实施例中，可以将自动包围设置与最终设置进行比较，以将要被包括在最终视频文件中的一个或多个初始图像识别为匹配所确定的针对环境的相机设置。这可以针对视频进行初始帧的非常快速的视频采集以及快速自动传感器调节。在一些实施例中，后处理可以进一步用于将使用自动包围设置采集的一个或多个图像与使用最终相机设置采集的图像进行匹配。在各种实施例中，自动包围设置用于曝光值，诸如曝光时间、灵敏度(例如，描述对光的灵敏度的国际标准组织(ISO)值)、快门速度和/或光圈值。在其它实施例中，在对用户输入的初始响应期间，任何数量的相机设置可以与自动包围一起使用以开始记录视频。在一些实施例中，联网通信系统可用于处理来自大量装置的自动包围设置以更新和调节自动包围设置。在某些实施例中，此类系统分析帧质量和对某些自动包围设置的响应度，并基于此类分析将更新的设置传送给系统中的装置。此外，在一些实施例中，此类更新的自动包围设置考虑诸如一天中的时间、天气或位置的信息，以便向相机装置的处理器提供不同的自动包围设置。在图像传感器被激活之前向相机装置的处理器提供此类目标自动包围设置能够实现快速视频采集和传感器调节。在一些实施例中，用户设置允许用户为装置选择某些自动包围设置。现在将参考更详细的示例实施例描述各个方面和替代配置。图1-3示出了实施各种公开技术的电子装置的示例实施例，其中，电子装置是由具有支持电子技术的眼镜31构成的眼镜制品的示例形式，该眼镜可以进一步在网络系统100或101内操作以用于传送图像和视频内容。图1示出了眼镜31的前透视图，根据该示例实施例，该眼镜31响应于用户采用单动作输入机构的接合而提供一个或多个图像采集参数的自动包围。眼镜31可包括由任何合适材料(诸如塑料或金属，包括任何合适的形状记忆合金)制成的框架32。框架32可具有前件33，该前件33可包括第一或左透镜、显示器或光学元件保持器36以及通过桥38连接的第二或右透镜、显示器或光学元件保持器37。前件33另外包括左端部分41和右端部分42。第一或左光学元件43和第二或右光学元件44可以设置在相应的左和右光学元件保持器36、37内。每个光学元件43、44可以是透镜、显示器、显示组件或前述的组合。在一些实施例本文档来自技高网...

【技术保护点】
1.一种方法，包括：/n在服务器计算机处从第一装置接收使用第一自动包围配置序列采集的第一视频剪辑的第一视频采集数据；/n分析所述第一视频采集数据以确定与所述第一自动包围配置序列相关联的第一性能值序列；/n在所述服务器计算机处从第二装置接收使用第二自动包围配置序列采集的第二视频剪辑的第二视频采集数据；/n分析所述第二视频采集数据以确定与所述第二自动包围配置序列相关联的第二性能值序列；以及/n基于所述第一性能值序列和所述第二性能值序列，生成包括更新的自动包围配置序列的自动包围更新信息序列。/n

【技术特征摘要】
20161101 US 62/415,8881.一种方法，包括：
在服务器计算机处从第一装置接收使用第一自动包围配置序列采集的第一视频剪辑的第一视频采集数据；
分析所述第一视频采集数据以确定与所述第一自动包围配置序列相关联的第一性能值序列；
在所述服务器计算机处从第二装置接收使用第二自动包围配置序列采集的第二视频剪辑的第二视频采集数据；
分析所述第二视频采集数据以确定与所述第二自动包围配置序列相关联的第二性能值序列；以及
基于所述第一性能值序列和所述第二性能值序列，生成包括更新的自动包围配置序列的自动包围更新信息序列。


2.根据权利要求1所述的方法，其中，所述第一自动包围配置序列和所述第二自动包围配置序列是相同的。


3.根据权利要求1所述的方法，其中，所述更新的自动包围配置序列中的每个更新的自动包围配置包括：将相机配置为采集视频剪辑中的一个或多个帧的一个或多个相机设置。


4.根据权利要求1所述的方法，还包括：
从所述服务器计算机向所述第一装置发送所述更新的自动包围配置序列；以及
从所述服务器计算机向所述第二装置发送所述更新的自动包围配置序列。


5.根据权利要求4所述的方法，其中，所述更新的自动包围配置序列用于所述第一装置和所述第二装置配置相机以采集初始视频剪辑。


6.根据权利要求1所述的方法，其中，所述更新的自动包围配置序列中的每个更新的自动包围配置包括国际标准组织ISO设置和曝光等级设置。


7.根据权利要求1所述的方法，其中，所述更新的自动包围配置序列中的每个更新的自动包围配置包括以下中的一个或多个相机设置：
(a)相机快门速度；
(b)相机曝光设置；
(c)相机对焦设置；
(d)相机白平衡设置；
(e)基于图像亮度度量的相机闪光灯设置；以及
(f)图像稳定设置。


8.根据权利要求7所述的方法，还包括：
基于所述第一视频剪辑和所述第二视频剪辑中的对应帧的图像亮度度量和图像清晰度度量中的一个或多个，针对所述更新的自动包围配置序列中的每个更新的自动包围配置，确定所述相机快门速度。


9.根据权利要求7所述的方法，还包括：
基于所述第一视频剪辑和所述第二视频剪辑中的对应帧的图像着色度量，针对所述更新的自动包围配置序列中的每个更新的自动包围配置，确定所述相机白平衡设置。


10.根据权利要求7所述的方法，还包括：
基于所述第一视频剪辑和所述第二视频剪辑中的对应帧的图像亮度度量，针对所述更新的自动包围配置序列中的每个更新的自动包围配置，确定所述相机闪光灯设置。


11.根据权利要求7所述的方法，还包括：
基于对应的图像亮度度量和对应的图像清晰度度量中的一个或多个，针对所述更新的自动包围配置序列中的每个更新的自动包围配置，确定所述图像稳定设置，使得可以对专用于摄影图像稳定的板载处理量进行自动调节。


12.根据权利要求1所述的方法，其中，所述第一视频采集数据指示所述第一视频剪辑的一天中的第一时间和第一位置，所述第二视频采集数据指示所述第二视频剪辑的一天中的第...

【专利技术属性】
技术研发人员：P·布鲁克，
申请(专利权)人：斯纳普公司，
类型：发明
国别省市：美国;US