System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 图像处理设备及其控制方法和存储介质技术_技高网

图像处理设备及其控制方法和存储介质技术

技术编号:40908285 阅读:2 留言:0更新日期:2024-04-18 14:38
本发明专利技术提供图像处理设备及其控制方法和存储介质。图像处理设备包括:一种图像处理设备,包括:一个或多于一个存储器,其存储指令;以及一个或多于一个处理器,其执行所述指令以进行以下操作:获得至少一个被摄体的三维形状数据,其中,所述三维形状数据是使用由多个摄像单元从多个方向拍摄的至少一个被摄体的图像来生成的;提取所获得的三维形状数据的多个部位;基于所提取的多个部位的位置向所提取的多个部位分配标识符;以及基于所述标识符和所提取的多个部位的位置来追踪所提取的多个部位。

【技术实现步骤摘要】

本专利技术涉及用于生成虚拟视点图像的图像处理设备、图像处理设备的控制方法和存储介质。


技术介绍

1、已知有如下虚拟视点图像生成系统,该虚拟视点图像生成系统基于由包括多个照相机的摄像系统拍摄的图像,来生成作为从用户所指定的虚拟视点观看的图像的虚拟视点图像。日本特开2017-211828讨论了如下系统,其中在该系统中,由多个照相机拍摄的图像被发送到图像计算服务器(图像处理设备),然后图像处理设备从拍摄图像中提取具有大变化的区域作为前景图像并且提取具有小变化的区域作为背景图像。

2、近年来,使用例如头戴式显示器(hmd)的虚拟现实(vr)已经使得用户能够享受观看体验,如同用户处于由三维计算机图形(3dcg)创建的虚拟空间中。例如,在vr中,已经由使用化身(avatar)的虚拟艺术家举办音乐会。

3、在这种音乐会中,已要求使用上述虚拟视点图像在虚拟3d空间中再现真实艺术家的音乐会。例如,在使用虚拟视点图像在虚拟3d空间中再现真实艺术家的音乐会的情况下,为了合成与艺术家位置相对应的声源,追踪艺术家的位置是必要的。然而,特别是在多个艺术家的情况下,追踪各个艺术家的位置可能是困难的。


技术实现思路

1、根据本专利技术的方面,图像处理设备包括:一个或多于一个存储器,其存储指令;以及一个或多于一个处理器,其执行所述指令以进行以下操作:获得至少一个被摄体的三维形状数据,其中,所述三维形状数据是使用由多个摄像单元从多个方向拍摄的至少一个被摄体的图像来生成的;提取所获得的三维形状数据的多个部位;基于所提取的多个部位的位置向所提取的多个部位分配标识符;以及基于所述标识符和所提取的多个部位的位置来追踪所提取的多个部位。

2、根据以下参考附图对示例性实施例的描述,本专利技术的其他特征将变得明显。

本文档来自技高网...

【技术保护点】

1.一种图像处理设备,包括:

2.根据权利要求1所述的图像处理设备,其中,所述一个或多于一个处理器通过切出所述三维形状数据中的一部分来提取所述多个部位。

3.根据权利要求1所述的图像处理设备,其中,所述一个或多于一个处理器提取与所述三维形状数据中的脚相对应的多个部位。

4.根据权利要求1所述的图像处理设备,所述一个或多于一个处理器还执行所述指令,以基于追踪结果来计算所提取的多个部位中的被分配相同标识符的部位的代表位置,并且输出所述代表位置作为被摄体位置。

5.根据权利要求1所述的图像处理设备,其中,所述一个或多于一个处理器基于所述三维形状数据的多个部位之间的距离,向所述多个部位中的各个部位分配标识符。

6.根据权利要求1所述的图像处理设备,其中,所述一个或多于一个处理器判断所提取的多个部位中的各个部位被包括在哪个所述三维形状数据中的外接长方体中,并且向所提取的多个部位中的相同外接长方体中所包括的部位分配相同的标识符。

7.根据权利要求1所述的图像处理设备,其中,所述一个或多于一个处理器设置要被分配预定标识符的区域,并且将所述预定标识符分配给所提取的多个部位中的、所述区域中所包括的部位。

8.根据权利要求1所述的图像处理设备,其中,所述一个或多于一个处理器基于用户的指令向已经被分配标识符的所提取的多个部位重新分配标识符。

9.根据权利要求1所述的图像处理设备,其中,所述一个或多于一个处理器将所述多个部位投影到与地面相对应的二维平面上以生成二维图像,在所述二维图像上切出所述多个部位作为独立区域,并输出所述二维图像上的所述独立区域的各个外接矩形。

10.根据权利要求1所述的图像处理设备,其中,所述一个或多于一个处理器提取与从所述三维形状数据中的外接长方体的底面起的预定高度相对应的形状。

11.根据权利要求1所述的图像处理设备,其中,所述一个或多于一个处理器提取与从所述三维形状数据中的摄像区域的地面起的预定高度相对应的形状。

12.根据权利要求1所述的图像处理设备,其中,在所述至少一个被摄体位于摄像区域中所放置的结构体上的情况下,所述一个或多于一个处理器提取与从所述三维形状数据中的所述结构体的顶面起的预定高度相对应的形状。

13.根据权利要求1所述的图像处理设备,

14.根据权利要求4所述的图像处理设备,其中,所述一个或多于一个处理器基于所述标识符、以及所提取的多个部位的摄像时间紧前的时间处的被摄体位置,向所提取的多个部位分配标识符。

15.根据权利要求14所述的图像处理设备,其中,所述一个或多于一个处理器基于所述标识符和所述紧前的时间处的所提取的多个部位的位置,向所提取的多个部位分配标识符。

16.根据权利要求15所述的图像处理设备,

17.根据权利要求16所述的图像处理设备,其中,在所提取的多个部位中存在与所述紧前的时间处的多个被摄体位置重叠的位置处的部位的情况下,所述一个或多于一个处理器不向该部位分配标识符,并且不更新与所有多个被摄体位置有关的位置信息。

18.一种图像处理设备的控制方法,所述控制方法包括:

19.一种非暂态计算机可读存储介质,其存储有程序,所述程序用于使计算机进行图像处理设备的控制方法,所述控制方法包括:

...

【技术特征摘要】

1.一种图像处理设备,包括:

2.根据权利要求1所述的图像处理设备,其中,所述一个或多于一个处理器通过切出所述三维形状数据中的一部分来提取所述多个部位。

3.根据权利要求1所述的图像处理设备,其中,所述一个或多于一个处理器提取与所述三维形状数据中的脚相对应的多个部位。

4.根据权利要求1所述的图像处理设备,所述一个或多于一个处理器还执行所述指令,以基于追踪结果来计算所提取的多个部位中的被分配相同标识符的部位的代表位置,并且输出所述代表位置作为被摄体位置。

5.根据权利要求1所述的图像处理设备,其中,所述一个或多于一个处理器基于所述三维形状数据的多个部位之间的距离,向所述多个部位中的各个部位分配标识符。

6.根据权利要求1所述的图像处理设备,其中,所述一个或多于一个处理器判断所提取的多个部位中的各个部位被包括在哪个所述三维形状数据中的外接长方体中,并且向所提取的多个部位中的相同外接长方体中所包括的部位分配相同的标识符。

7.根据权利要求1所述的图像处理设备,其中,所述一个或多于一个处理器设置要被分配预定标识符的区域,并且将所述预定标识符分配给所提取的多个部位中的、所述区域中所包括的部位。

8.根据权利要求1所述的图像处理设备,其中,所述一个或多于一个处理器基于用户的指令向已经被分配标识符的所提取的多个部位重新分配标识符。

9.根据权利要求1所述的图像处理设备,其中,所述一个或多于一个处理器将所述多个部位投影到与地面相对应的二维平面上以生成二维图像,在所述二维图像上切出所述多个部位作为独立区域,并输出所述二维图像上的所述独立区域...

【专利技术属性】
技术研发人员:小沼和文
申请(专利权)人:佳能株式会社
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1