作业辅助服务器、作业辅助方法技术

本发明专利技术提供一种作业辅助服务器、作业辅助方法。作业辅助服务器(10)以能够相应于对具有图像输出装置(221)的远程操作装置(20)进行的操作来选择性地对多个作为操作对象的作业机械(40)进行远程操作的方式对作业进行辅助。作业辅助服务器(10)的第一辅助处理元件(121)识别各作业机械(40)的位置，第二辅助处理元件(122)在远程操作装置(20)的操作对象从第一作业机械(40a)切换为第二作业机械(40b)时，将同时捕捉到第一作业机械(40a)和第二作业机械(40b)的各位置的图像显示于图像输出装置(221)。(221)。(221)。

【技术实现步骤摘要】
【国外来华专利技术】作业辅助服务器、作业辅助方法
[
][0001]本专利技术涉及一种对作业机械的远程操作进行辅助的作业辅助服务器和对作业机械的作业进行辅助的作业辅助方法。
[
技术介绍
][0002]以往，在远程挖掘机等作业机械进行作业的作业现场设置有多个定点照相机，能够俯瞰观察整个现场、或者监视特定的挖掘机的动作或作业。
[0003]例如，下述专利文献1的施工现场管理系统具备多个拍摄装置和信息提示装置。多个拍摄装置分别设置在施工现场的上方，对施工现场进行俯瞰拍摄。而且，施工现场中有人驾驶车辆能够行驶的所有地点均由至少一个拍摄装置进行拍摄。
[0004]另外，信息提示装置能够基于多个拍摄装置拍摄的图像来生成映现出整个施工现场的整体俯瞰图像，并使装货车辆的车载终端显示描绘有搬运车辆的整体俯瞰图像。信息提示装置例如设置于施工现场的建筑物内部(专利文献1/第0008～0010段，图1)。
[0005][现有技术文献][0006]专利文献
[0007]专利文献1：日本特开2019
‑
151968号公报
[
技术实现思路
][0008]专利技术要解决的课题
[0009]这样的拍摄装置的图像(影像)有助于掌握作业现场中的多个作业机械的位置。但是，在通过远程操作装置操作作业机械的情况下，存在切换其操作对象的情况。具体而言，进行将操作对象机械从当前操作的作业机械切换为接下来预定的作业机械的操作。此时，要求不仅掌握预定操作的作业机械的位置，还掌握其姿势、周围的状况。但是，在上述专利文献1记载的信息提示装置中，难以掌握这些信息。
[0010]本专利技术是鉴于上述问题而完成的，其目的在于提供一种作业辅助服务器，其使作业者识别作为操作对象的多个作业机械周围的状况、相对位置关系等来对作业进行辅助。
[0011]用于解决课题的手段
[0012]第一专利技术是一种作业辅助服务器，其以能够相应于对具有显示装置的远程操作装置进行的操作来选择性地对多个作为操作对象的作业机械进行远程操作的方式，对所述作为操作对象的作业机械的作业进行辅助，其特征在于，具备：第一辅助处理元件，其识别作为所述远程操作装置的操作对象的所述作业机械的位置；以及第二辅助处理元件，其在所述远程操作装置的操作对象从第一所述作业机械切换为第二所述作业机械时，将同时捕捉到所述第一作业机械和所述第二作业机械的各位置的图像显示于所述显示装置。
[0013]本专利技术的作业辅助服务器，为了对通过远程操作装置操作作为操作对象的作业机械而进行的作业进行辅助，而具备第一辅助处理元件和第二辅助处理元件。第一辅助处理元件识别作为操作对象的作业机械的位置。
[0014]另外，第二辅助处理元件在操作对象从第一作业机械的作业切换为第二作业机械的作业时，进行显示同时捕捉到该第一作业机械和该第二作业机械的各位置的图像的显示控制，将该图像显示于显示装置。由此，本作业辅助服务器能够使作业者识别多个作业机械的相对位置关系等，以安全且可靠地进行作业。
[0015]第二专利技术是一种作业辅助方法，其以能够相应于对具有显示装置的远程操作装置进行的操作来选择性地对多个作为操作对象的作业机械进行远程操作的方式，对所述作为操作对象的作业机械的作业进行辅助，其特征在于，具备：第一步骤，识别作为所述远程操作装置的操作对象的所述作业机械的位置；以及第二步骤，在所述远程操作装置的操作对象从第一所述作业机械切换为第二所述作业机械时，将同时捕捉到所述第一作业机械和所述第二作业机械的各位置的图像显示于所述显示装置。
[0016]在本专利技术的作业辅助方法中，为了对通过远程操作装置操作作为操作对象的作业机械而进行的作业进行辅助，而具备第一步骤和第二步骤。在第一步骤中，识别作为操作对象的作业机械的位置。然后，在第二步骤中，在操作对象从第一作业机械的作业切换为第二作业机械的作业时，进行显示同时捕捉到该第一作业机械和该第二作业机械的各位置的图像的显示控制，将该图像显示于显示装置。由此，本作业辅助方法能够使作业者识别多个作业机械的相对位置关系等，以安全且可靠地进行作业。
[0017][附图的简单说明][0018]图1是说明本专利技术的实施方式的作业辅助系统的概要的图。
[0019]图2是说明作业机械的操作机构的结构的图。
[0020]图3是说明作业机械的详细情况的图。
[0021]图4是从上空观察作业现场的俯瞰图像的例子。
[0022]图5是作业辅助服务器和远程操作装置进行的各处理的流程图。
[0023]图6是作业机械切换过程的显示处理的流程图。
[0024]图7是进行第一条件的判定的处理的流程图。
[0025]图8是图像输出装置上显示的拍摄图像的例子(1)。
[0026]图9是图像输出装置上显示的拍摄图像的例子(2)。
[具体实施方式][0027]以下，参照附图对本专利技术的作业辅助服务器的详细情况进行说明。
[0028]首先，参照图1，对本专利技术的实施方式的作业辅助服务器10和包含其的作业辅助系统1进行说明。除了作业机械40以外，作业辅助系统1还由以下部分构成：作业辅助服务器10；远程操作装置20，其用于对作业机械40进行远程操作；以及多台设备照相机30，其设置于作业现场的规定位置，对作业机械40进行拍摄。
[0029]作业辅助服务器10、远程操作装置20、设备照相机30和作业机械40构成为能够通过网络NW相互通信。作业辅助服务器10根据作为远程操作装置20的远程操作对象的作业机械40向其他作业机械40的切换、作业机械40相应于远程操作装置20的远程操作而进行的移动、通过远程操作装置20的远程操作而进行的作业机械40的作业内容等，自动选择适当的设备照相机30。并且，作业辅助服务器10为了对远程操作装置20的操作者OP的操作进行辅助，向后述的图像输出装置221输出拍摄图像。
[0030]作业辅助服务器10具备数据库102、第一辅助处理元件121、第二辅助处理元件122和服务器无线通信设备124。数据库102存储保持由设备照相机30拍摄的拍摄图像等。数据库102也可以由与作业辅助服务器10分离的数据库服务器构成。
[0031]辅助处理元件121和122由运算处理装置(单核处理器或多核处理器、或构成其的处理器内核)构成。并且，辅助处理元件121和122从存储器等存储装置读取必要的数据和软件，并以该数据为对象执行依照该软件的运算处理。另外，服务器无线通信设备124经由网络NW指示图像输出装置221进行显示、或者从设备照相机30接收拍摄图像。
[0032]接着，远程操作装置20具备远程控制装置200、远程输入接口210和远程输出接口220。远程控制装置200由运算处理装置(单核处理器或多核处理器、或构成其的处理器内核)构成。并且，远程控制装置200从存储器等存储装置读取必要的数据和软件，并以该数据为对象执行依照该软件的运算处理。
[0033]远程输入接口210具备远程操作机构211。另外，远程输出接口220具备图像输出装置221和本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种作业辅助服务器，其以能够相应于对具有显示装置的远程操作装置进行的操作来选择性地对多个作为操作对象的作业机械进行远程操作的方式，对所述作为操作对象的作业机械的作业进行辅助，其具备：第一辅助处理元件，其识别作为所述远程操作装置的操作对象的所述作业机械的位置；以及第二辅助处理元件，其在所述远程操作装置的操作对象从第一所述作业机械切换为第二所述作业机械时，将同时捕捉到所述第一作业机械和所述第二作业机械的各位置的图像显示于所述显示装置。2.根据权利要求1所述的作业辅助服务器，其中，所述第一辅助处理元件掌握配置于所述作业机械所在的作业现场的多台设备照相机的位置和拍摄方向，并根据该设备照相机的位置和拍摄方向、以及所述第一作业机械和所述第二作业机械的各位置，选择同时捕捉该各位置的所述设备照相机，所述第二辅助处理元件进行将由所述第一辅助处理元件选择的所述设备照相机拍摄的拍摄图像显示于所述显示装置的设备照相机显示处理。3.根据权利要求2所述的作业辅助服务器，其中，基于由所述第一辅助处理元件识别出的所述第一作业机械和所述第二作业机械的各位置，所述设备照相机拍摄俯瞰该各位置的俯瞰图像，所述第二辅助处理元件进行将拍摄的所述俯瞰图像显示于所述显示装置的俯瞰图像显示处理。4.根据权利要求1所述的作业辅助服务器，其能够执行：设备照相机显示处理，通过所述第一辅助处理元件，掌握配置于所述作业机械所在的作业现场的设备照相机的位置和拍摄方向，并根据该设备照相机的位置和该拍摄方向、以及所述第一作业机械和所述第二作业机械的各位置，选择同时捕捉该各位置的所述设备照相机，通过所述第二辅助处理元件，使所述显...

【专利技术属性】
技术研发人员：佐佐木均，佐伯诚司，山崎洋一郎，
申请(专利权)人：神钢建机株式会社，
类型：发明
国别省市：