【技术实现步骤摘要】
本专利技术涉及图像处理方法领域。本专利技术具体涉及用于车辆中视频会议的图像处理的计算机实施的方法、计算机程序产品、计算机可读存储介质以及数据载波信号。本专利技术还涉及对应的用于车辆的数据处理设备。
技术介绍
1、已知可以用来进行视频会议的许多设备和系统，同时使用图像处理方法。举例来说，在这方面，通常用图形来替换参与者的图像周围的背景。
2、这里经常出现不期望的效果，特别是在参与者的图像的边缘。一种这样的不期望的效果是例如真实背景在参与者的图像的边缘处(例如在肩膀或头发周围)仍然可见，而没有被合成背景替换。
3、此外，由于社会中移动性的增加，人们希望将这些视频会议系统应用到车辆中。然而，现有的视频会议系统不适合驾驶时可能存在的条件。举例来说，在驾驶时，由于路灯或其他道路使用者导致照明条件不断变化，图像曝光更加动态。
技术实现思路
1、因此，本专利技术的一个目的是提供一种用于车辆中视频会议的计算机实施的图像处理方法，从而消除上述缺点。本专利技术的另一目的是提供一种对应的用于车辆的计算机程序产品、计算机可读存储介质、数据载波信号和数据处理设备。
2、根据本专利技术的第一方面，一种用于具有第一摄像头和第二摄像头的车辆中视频会议的图像处理的计算机实施的方法包括接收步骤，在该步骤中，接收来自第一摄像头的第一图像数据和来自第二摄像头的第二图像数据。在这种情况下，图像数据包含从略有不同视角拍摄的车辆乘员图像。该方法还具有第一提取步骤，在该步骤中，使用两个图像数据
3、由此定义的计算机实施的方法基于第一图像数据中的车辆乘员识别并使用附加深度信息来确定第一图像数据中对应于乘员的图像区域，这具体地比目前为止使用的方法更加精确。这里，深度信息是经由第一图像数据与第二图像数据之间的视差生成的，这就是为什么它们包含车辆乘员的视角略有不同的图像。然而，也可以通过其他方式获得深度信息图。举例来说，可以定义和训练人工神经网络，使其仅从单个图像创建深度信息图。
4、此外，从第一图像数据中提取特征并进行分类，这能够由本领域技术人员使用常规机器学习装置(例如使用对象检测器)来执行。在这种情况下，经分类的特征至少包括乘员。
5、然后可以根据深度信息图和经分类的特征创建三维模型，该三维模型例如由经分类的特征及其深度信息组成。还可以将深度信息添加到第一图像数据的每个像素。
6、经分类的特征的示例为乘员、靠背、其他乘员、中央控制台中的咖啡杯，还有肩膀、鼻子、眼睛、头发或眼镜。经分类的特征还可以被分组为或者包括其他经分类的特征。举例来说，经分类的特征“乘员”因此可以包括分类子特征“眼镜”、“鼻子”或“嘴”。
7、举例来说，某些经分类的特征随后可以被改变或从所得到的三维模型中去除。换句话说，可以使用三维模型来合成第一图像数据。有许多合成选项：举例来说，可以替换背景，或者可以生成人工曝光情况。
8、最后，将合成图像显示在显示设备上，从而使得乘员能够参加视频会议，同时实际记录的图像的不利影响被去除或以改进的形式显示。
9、在一个有利的实施例中，两个摄像头中的至少一个能够从红外光谱范围生成图像数据。
10、该实施例是有利的，因为红外光谱范围内的图像数据可以用于中和外部照明条件，例如使用相对于可见光谱范围内的图像数据的差异。无论外部照明情况如何，都可以更可靠地提取和分类特征。
11、在该方法的另一有利实施例中，合成步骤包括裁剪乘员的图像和/或替换背景。
12、在一个有利实施例中，合成步骤包括如果满足至少一个先前定义的约束/边界条件，则修改该三维模型的经分类的特征的照明特性和/或反射率特性。
13、经分类的特征的反射率特性通常取决于特征的材料。举例来说，由羊毛制成的衣服的表面比由铝制成的眼镜框反射得更漫射。照明特性是从第一图像数据中提取的，并描述光源从哪里发射、以什么强度、以什么发射轮廓、以及在什么方向上发射。照明特性被集成到三维模型中。
14、照明特性和/或反射率特性应该仅在先前定义的约束内进行修改。例如，可以定义这样的约束，使得它们对应于曝光条件的快速变化。换句话说，只有当曝光条件发生快速变化时，例如当夜间沿着照明道路行驶时，才执行对应的修改。
15、在该方法的一个优选变型中，先前定义的约束对应于经分类的特征的过度曝光或经分类的特征的曝光的快速变化。
16、在该方法的另一有利实施例中，经分类的特征的照明特性和/或反射率特性的修改包括第三提取步骤，在该步骤中，基于三维模型提取反射率图。此外，该实施例包括第四提取步骤，在该步骤中，基于反射率图提取经分类的特征的照明特性和反射率特性。在修改步骤中，修改这些经分类的特征的照明特性和反射率特性以形成修改的照明特性和修改的反射率特性。此外，在生成步骤中，生成合成图像，使得照明特性和反射率特性被这些修改的照明特性和修改的反射率特性替换。
17、如果外部曝光条件发生变化，例如因为视频会议是在黑暗中沿着有路灯的道路进行的，则乘员在短时间内会受到不同的照明。这被认为对视频会议的其他参与者造成干扰。在这样的条件下，特别期望修改某些经分类的特征的照明特性和/或反射率特性。
18、如果检测到对应的约束，则可以修改乘员或乘员的部分的照明特性和/或反射率特性，以便由此创建人工曝光环境。这种人工曝光环境抵消了动态的真实曝光环境，使得视频会议中的其他参与者不会注意到图像的动态变化。
19、根据本专利技术的第二方面，一种计算机程序产品包含指令，当该指令由计算机执行时，这些指令使所述计算机执行用于视频会议的计算机实施的图像处理方法。
20、根据本专利技术的第三方面，一种计算机可读存储介质包含指令，这些指令在由计算机执行时使所述计算机执行用于视频会议的计算机实施的图像处理方法。
21、根据本专利技术的第四方面，一种数据载波信号传输计算机程序产品，该计算机程序产品在由计算机执行时使所述计算机执行用于视频会议的计算机实施的图像处理方法。
22、根据本专利技术的第五方面，一种用于车辆的数据处理设备被设计为执行用于视频会议的计算机实施的图像处理方法，其中，该数据处理设备具有至少一个处理器，其被配置为使得该数据处理设备能够执行用于视频会议的计算机实施的图像处理方法的步骤。此外，该数据处理设备具有至少一个非易失性计算机可读存储介质，其通信地连接到至少一个处理器，其中，该至少一个存储介质存储编程语言的指令，这些指令用于执行用于视频会议的计算机实施的本文档来自技高网...
【技术保护点】
1.一种用于车辆(134)中视频会议的图像处理的计算机实施的方法(100)，其中，车辆(134)具有第一摄像头(122)和第二摄像头(124)，
2.如权利要求1所述的计算机实施的方法，其特征在于，该两个摄像头(122，124)中的至少一个能够从红外光谱范围生成图像数据(142，144)。
3.如权利要求1或2所述的计算机实施的方法，其特征在于，合成步骤(114)包括裁剪乘员(132)的图像和/或替换背景。
4.如前述权利要求之一所述的计算机实施的方法，其特征在于，合成步骤(114)包括：如果满足至少一个先前定义的约束(172)，则修改三维模型(152)的经分类的特征(148)的照明特性(162)和/或反射率特性(164)。
5.如权利要求4所述的计算机实施的方法，其特征在于，该先前定义的约束(172)对应于经分类的特征(148)的过度曝光或经分类的特征(148)的曝光的快速变化。
6.如权利要求4或5所述的计算机实施的方法，其特征在于，对经分类的特征(148)的照明特性(162)和/或反射率特性(164)的修改包括以下
7.一种计算机程序产品，该计算机程序产品包含指令，当该程序由计算机执行时所述指令使所述计算机执行如前述权利要求之一所述的方法(100)。
8.一种计算机可读存储介质(120)，该计算机可读存储介质包含指令，所述指令在由计算机执行时使所述计算机执行如权利要求1至6之一所述的方法(100)。
9.一种数据载波信号，其传输如权利要求7所述的计算机程序产品。
10.一种用于车辆(134)的数据处理设备(129)，该数据处理设备被设计为执行如权利要求1至6之一所述的计算机实施的方法(100)，其中，该用于车辆(134)的数据处理设备(129)具有：
...【技术特征摘要】
1.一种用于车辆(134)中视频会议的图像处理的计算机实施的方法(100)，其中，车辆(134)具有第一摄像头(122)和第二摄像头(124)，
2.如权利要求1所述的计算机实施的方法，其特征在于，该两个摄像头(122，124)中的至少一个能够从红外光谱范围生成图像数据(142，144)。
3.如权利要求1或2所述的计算机实施的方法，其特征在于，合成步骤(114)包括裁剪乘员(132)的图像和/或替换背景。
4.如前述权利要求之一所述的计算机实施的方法，其特征在于，合成步骤(114)包括：如果满足至少一个先前定义的约束(172)，则修改三维模型(152)的经分类的特征(148)的照明特性(162)和/或反射率特性(164)。
5.如权利要求4所述的计算机实施的方法，其特征在于，该先前定义的约束(172)对应于经分类的特征(148)的过度曝光...
【专利技术属性】
技术研发人员：W·冯施皮格尔，M·戈特瓦尔德，D·诺杰克，J·埃尔梅斯，
申请(专利权)人：大陆汽车科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。