图像显示系统以及方法技术方案

本发明专利技术涉及图像显示系统以及方法，提供一种当从用照相机拍摄的图像组中选择用于规定用途的图像时，能够容易地选择合适的图像，能够减小用户作业的工夫的技术。本图像显示系统的计算机系统(1)输入拍摄的图像组(201)，在一览画面(401)显示图像组(201)的一览，在个别画面(402)中显示基于用户的操作而从图像组(201)选择的第一图像。计算机系统(1)根据第一图像和位于其周围的候补图像的组的空间位置关系的判断、以及与拍摄范围相关的重复状态的判断，来判断针对第一图像的相邻图像，在个别画面(402)，根据用户的操作，选择并显示针对第一图像的相邻图像。

Image display system and method

【技术实现步骤摘要】
【国外来华专利技术】图像显示系统以及方法
本专利技术涉及图像组的处理、显示的技术。另外，本专利技术涉及应用于构造物的劣化检查辅助等有用的技术。
技术介绍
在各种用途中，用户使用照相机拍摄图像组(动画或者多个静止画面)，输入PC等的计算机中。用户在显示画面中显示用计算机处理过的图像组，或从图像组中选择的个别图像。用户在显示画面中确认图像组或个别图像，进行对应于用途的作业。作业举出例如一般的照片图像的编辑作业。作为使用上述图像组的用途的一个例子，举出从拍摄构造物的表面的图像中，用于检查或诊断构造物表面的劣化等的状态的系统、功能(有时记载为构造物劣化检查等)。作为进行维护检查作业的作业者的用户通过人工或者使用无人机或机器人等，通过照相机拍摄维护检查对象的构造物的表面。构造物举出各种建筑物或基础设施等。用户将通过照相机拍摄的图像组输入计算机，在显示画面中显示计算机处理过的图像组。用户在显示画面从图像组中选择检查对象的个别图像并在显示画面中显示。用户例如进行肉眼检查的作业。在这种情况下，用户观察显示画面的个别图像，通过目测确认检测有没有裂缝、腐蚀或剥离等的状态(有时统称记载为劣化)或者位置。作为使用上述图像组的用途的另外一个例子，举出从拍摄构造物的表面的图像中，基于公知的SFM(StructureForMotion：运动恢复结构)等的处理，生成、获取构造物的三维模型，在显示画面中显示的系统、功能(有时记载为构造物三维模型生成等)。作为上述图像显示的现有技术的例子，举出日本特开2000-90232号公报(专利文件1)。在专利文件1中记载了作为全景图像合成装置等，用数码照相机以图像的一部分重复的方式多次分割拍摄被摄体像，将通过拍摄得到的多个图像合成来生成全景图像的步骤、将全景图像的整体预览和局部预览同时显示在同一窗口中的步骤等。另外，作为上述构造物劣化检查的现有技术的一个例子，举出日本特开平11-132961号公报(专利文件2)。在专利文件2中记载了作为构造物用检查装置，对被检查物多次分割拍摄，在拍摄的多个图像数据中，存储附加对应的位置信息或拍摄信息的图像数据，通过指定被检查物的检查位置，选择图像数据，作为接合检查位置及其周围的多个图像数据的图像显示的内容。专利文件1：日本特开2000-90232号公报专利文件2：日本特开平11-132961号公报在现有的图像显示系统中，当用户在显示画面从图像组中选择用于规定用途的个别图像时，存在难以选择合适的图像的情况，或者作业的时间较长的情况。例如，在构造物劣化检查辅助的用途的情况下，用户需要在显示画面从多个图像中选择检查对象图像。这时，存在在图像间重复(重叠)的部分较少而难以选择合适的图像的情况，劣化检查作业的时间较长。本专利技术的目的在于提供一种涉及图像显示的技术，当从用照相机拍摄的图像组中选择用于规定用途的图像时，能够容易地选择合适的图像，能够减少用户作业的工夫。
技术实现思路
本专利技术中代表性的实施方式是，图像显示系统，其中，具有如下所示的结构。一实施方式的图像显示系统，由计算机系统构成，所述计算机系统进行：输入包括拍摄的时间、位置以及方向不同的多个图像的图像组；在一览画面中显示所述图像组的一览；在个别画面中显示基于用户的操作而从所述图像组中选择的第一图像；根据所述第一图像和相对于所述第一图像在空间上位于周围的候补图像的组的空间位置关系的判断、以及与拍摄范围相关的重复状态的判断，来判断针对所述第一图像的相邻图像；以及在所述个别画面中，根据所述用户的操作，选择针对所述第一图像的所述相邻图像作为第二图像，显示所述第二图像作为新的所述第一图像。根据本专利技术中代表性的实施方式，关于图像显示技术，当从用照相机拍摄的图像组中选择用于规定用途的图像时，能够容易地选择合适的图像，能够减小用户作业的工夫。附图说明图1是示出包括本专利技术的实施方式的图像显示系统的构造物劣化检查辅助系统的结构的图。图2是示出在实施方式中无人机和计算机系统的协作的结构的图。图3是示出实施方式的图像显示系统的结构的图。图4是示出实施方式的图像显示系统的处理流程的图。图5是示出在实施方式中构造物的航拍方式的第一例的图。图6是示出在实施方式中构造物的航拍方式的第二例的图。图7是示出在实施方式中关于拍摄范围的图。图8是示出在在实施方式中关于航拍进行方向上的图像间的重复的图。图9是示出在实施方式中关于图像俯视下的图像间的重复的图。图10是示出在实施方式中关于相邻图像以及重复的例子的图。图11是示出在实施方式中关于拍摄范围中的重复状态的图。图12是示出在实施方式中关于相邻图像的重复状态的图。图13是示出在实施方式中关于SFM的图。图14是示出在实施方式中一览画面的第一例的图。图15是示出在实施方式中个别画面的第一例的图。图16是示出在实施方式中个别画面的第二例的图。图17是示出在实施方式中个别画面的第三例的图。图18是示出在实施方式中个别画面的第四例的图。图19是示出在实施方式中个别画面的第五例的图。图20是示出在实施方式中个别画面的第六例的图。图21是示出在实施方式中个别画面(劣化检查画面)的例子的图。图22是示出在实施方式中构造物三维模型画面的例子的图。图23是示出在实施方式中一览画面的第二例的图。图24是示出在实施方式中一览画面的第三例的图。图25是示出在实施方式中构造物的侧面间的图像关系的例子的图。图26是示出在实施方式中关于构造物的侧面间的图像选择的图。图27是示出在实施方式中构造物的航拍方式的第三例的图。具体实施方式下面，基于附图详细地说明本专利技术的实施方式。此外，在用于说明实施方式的所有附图中，原则上对相同部分标注相同的符号，省略其重复的说明。[技术问题等]对基础技术或技术问题等进行补充说明。以往，在例如构造物劣化检查辅助的用途或其系统中，进行如下的作业或处理。作为作业者的用户到达作为检查对象的构造物所在的现场，使用照相机拍摄构造物的表面。这时，有时拍摄构造物的表面的整个区域，还有时集中于一部分区域拍摄。特别地，存在具备与构造物相关知识的人(专业技术人员)预先从构造物的设计图中集中于认为容易产生劣化的位置，将该位置作为拍摄对象位置的情况。在这种情况下，限定拍摄位置以及图像数量，能够减小作业的工夫。用户将拍摄的图像组的数据带回事务所等，输入PC等的计算机中。用户在显示画面中，从图像组的一览中，选择作为检查对象图像的个别图像，在显示画面中显示。在进行肉眼检查的情况下，用户针对每张图像，通过肉眼，从图像内搜索裂缝等的劣化状态的有无和位置。上述那样通过人工的构造物的拍摄作业或劣化检查作业较耗费工夫。另外，还存在专业技术人员等的人员不足、或高成本等的常见技术问题。在此，作为对策，还存在使用无人机或UAV等的飞行体、或者机器人等，进行本文档来自技高网...

【技术保护点】
1.一种图像显示系统，由计算机系统构成，/n所述计算机系统进行：/n输入包括拍摄的时间、位置以及方向不同的多个图像的图像组；/n在一览画面中显示所述图像组的一览；/n在个别画面中显示基于用户的操作而从所述图像组中选择的第一图像；/n根据所述第一图像和相对于所述第一图像在空间上位于周围的候补图像的组的空间位置关系的判断、以及与拍摄范围相关的重复状态的判断，来判断针对所述第一图像的相邻图像；以及/n在所述个别画面中，根据所述用户的操作，选择针对所述第一图像的所述相邻图像作为第二图像，显示所述第二图像作为新的所述第一图像。/n

【技术特征摘要】
【国外来华专利技术】20180629 JP 2018-1249781.一种图像显示系统，由计算机系统构成，
所述计算机系统进行：
输入包括拍摄的时间、位置以及方向不同的多个图像的图像组；
在一览画面中显示所述图像组的一览；
在个别画面中显示基于用户的操作而从所述图像组中选择的第一图像；
根据所述第一图像和相对于所述第一图像在空间上位于周围的候补图像的组的空间位置关系的判断、以及与拍摄范围相关的重复状态的判断，来判断针对所述第一图像的相邻图像；以及
在所述个别画面中，根据所述用户的操作，选择针对所述第一图像的所述相邻图像作为第二图像，显示所述第二图像作为新的所述第一图像。


2.根据权利要求1所述的图像显示系统，其中，
所述计算机系统在所述个别画面中针对所述第一图像显示链接图像，所述链接图像表示所述相邻图像的存在以及方向，根据所述用户对所述链接图像的操作，选择所述相邻图像作为所述第二图像，显示所述第二图像作为新的所述第一图像。


3.根据权利要求1所述的图像显示系统，其中，
所述计算机系统在所述第一图像和所述候补图像的组中，作为所述重复状态，计算所述拍摄范围的重复率，选择所述重复率在重复率阈值的范围内成为最小的所述候补图像作为所述相邻图像。


4.根据权利要求1所述的图像显示系统，其中，
所述计算机系统使用包含所述图像组的各图像的拍摄位置的图像信息，在所述第一图像和所述候补图像的组中，作为所述空间位置关系，计算所述第一图像的位置和所述候补图像的位置的距离，选择所述距离最小的所述候补图像作为所述相邻图像。


5.根据权利要求1所述的图像显示系统，其中，
所述计算机系统使用包含所述图像组的各图像的拍摄位置的图像信息，在所述第一图像和所述候补图像的组中，作为所述空间位置关系，将所述第一图像的拍摄方向和所述候补图像的拍摄方向划分为大致相同的情况与不同的情况，在每个情况下判断所述相邻图像。


6.根据权利要求2所述的图像显示系统，其中，
所述计算机系统在所述个别画面中，作为所述链接图像，显示具有表示所述相邻图像相对于所述第一图像存在的方向的形状的链接图像。


7.根据权利要求2所述的图像显示系统，其中，
作为所述空间位置关系，在相对于所述第一图像的配置所述拍摄范围的第一面内的第一方向，存在所述相邻图像的配置所述拍摄范围的第二面内的第二方向的情况下，
所述计算机系统在所述个别画面中，作为所述链接图像，显示具有表示从所述第一方向向所述第二方向的变化的形状的链接图像。


8.根据权利要求1所述的图像显示系统，其中，
在存在所述第一图像和所述相邻图像的重复区域的情况下，
所述计算机系统在所述个别画面中，以删除图像内容的预定的表现来显示所述第一图像中的所述重复区域。


9.根据权利要求1所述的图像显示系统，其中，
在所述第一图像的周围存在未拍摄区域的情况下，
所述计算机系统在所述个别画面中，以表示是所述未拍摄区域的预定的表现来显示所述第一图像周围的所述未拍摄区域。


10.根据权利要求1所述的图像显示系统，其中，
在存在所述第一图像和所述相邻图像的重复区域的情况下，
所述计算机系统在所述个别画面中，以所述重复区域的轮廓线或示出所述重复区域的预定的表现来显示所述第一图像中的所述重复区域。


11.根据权利要求1所述的图像显示系统，其中，
所述计算机系统在所述一览画面中显示所述图像组中在所述个别画面中通过所述用户的操作而选择出的图像组的一览。


12.根据权利要求1所述的图像显示系统，其中，
所述计算机系统将所述图像组中在所述个别画面中通过所述用户的操作而选择出的图像组，与所述空间位置关系匹配地进行配置并在所述一览画面中显示。


13.根据权利要求1所述的图像显示系统，其中，
所述图像组是为了构造物的表面区域的劣化检查的用途而用照相机拍摄的图像组，
所述个别画面是受理所述用户的用于所述劣化检查的作业的操作的劣化检查画面。


14.根据权利要求1所述的图像显示系统，其中，
所述图像组是用于生成构造物的三维模型的用途而用照相机拍摄的图像组。


15.根据权利要求1所述的图像显示系统，其中，
所述图像组是由搭载照相机的飞行体航拍的图像组。


16.一种图像显示方法，是由计算机系统构成的图像显示系统的图像显示方法，
作为在所述计算机系统中执行的...

【专利技术属性】
技术研发人员：仲村柄真人，植田良一，大西健太郎，
申请(专利权)人：株式会社日立系统，
类型：发明
国别省市：日本;JP