自动操作系统及操作自动化方法技术方案

提供一种不必改造装置本身就能够对任意的装置进行自动操作的自动操作系统。该自动操作系统对制造装置(50)自动执行一系列的操作命令，具备：操作顺序制作部(101)，其生成一系列的操作命令；操作顺序执行部(102)，其执行一系列的操作命令；操作信号输出部(103)，其基于所执行的操作命令，将与制造装置(50)的输入装置的操作信号相应的信号发送给制造装置(50)；画面信息取得部(104)，其基于所执行的操作命令，取得在制造装置(50)的显示装置(52)上显示的画面的信息，并进行图像识别；以及操作初始设定部(105)，其取得生成一系列的操作命令时所需的制造装置(50)的信息，并对各个操作命令的设定所需的信息赋予ID并进行登录。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及自动操作系统及操作自动化方法。
技术介绍
在工厂等生产现场，运行着多种多样的制造装置，操作者对各个装置进行操作。为了减轻这样的操作者的作业负担，采用了将操作的一部分或整体自动化的系统(例如专利文献1)。现有技术文献专利文献专利文献1：日本特开2011-203954号公报专利技术的概要专利技术所要解决的课题但是，为了将操作自动化，需要对制造装置本身实施一些改造。为了对装置本身进行改造，需要该装置的知识，特别是在型号较老的装置的情况下很难应对。此外，一般来说，若对装置本身进行改造，则还存在装置制造商不再保修的问题。此外，自动化系统的开发需要掌握程序开发知识，但是希望具备装置操作相关知识的操作者即便没有程序开发知识也能够简单地开发自动化系统。
技术实现思路
于是，本专利技术的目的在于，提供一种不进行装置本身的改造，就能够对任意装置进行自动操作的自动操作系统。此外，本专利技术的目的在于，提供一种即便没有系统程序开发的知识，也能够简单地制作对任意装置进行自动操作的系统的自动操作系统。解决课题所采用的技术手段本专利技术的自动操作系统是对于操作对象装置自动执行一系列的操作命令的自动操作系统，具备：操作顺序制作部，其生成所述一系列的操作命令；操作顺序执行部，其执行所述一系列的操作命令；操作信号输出部，其基于所执行的所述操作命令，将与所述操作对象装置的输入装置的操作信号相应的信号发送给所述操作对象装置；以及画面信息取得部，其基于所执行的所述操作命令，取得在所述操作对象装置的显示装置上显示的画面的信息，并进行图像识别。根据本专利技术，能够提供一种不必改造装置本身就能够对任意的装置进行自动操作的自动操作系统。此外，优选为，具备操作初始设定部，其取得生成所述一系列的操作命令时所需的所述操作对象装置的信息，对各个操作命令的设定所需的信息赋予ID并登录。由此，能够提供一种即便没有系统程序开发知识也能够简单地制作对任意装置进行自动操作的系统。此外，优选为，所述操作初始设定部取得所述操作对象装置的全部操作画面，对于在操作的过程中需要的显示信息的位置信息赋予ID，并与图像数据一起登录。此外，优选为，所述操作初始设定部对于在所述操作对象装置的操作画面上进行键盘输入的区域的位置信息赋予ID，并与所输入的文本数据一起登录。此外，优选为，所述操作初始设定部对于在所述操作对象装置的操作画面上进行了鼠标操作的位置的位置信息赋予ID，并与鼠标操作的内容一起登录。此外，优选为，所述操作初始设定部对于在所述操作对象装置的操作画面上进行了手写笔操作的位置的位置信息赋予ID，并与手写笔操作的内容一起登录。此外，优选为，所述操作初始设定部对于在所述操作对象装置的操作画面上需要识别在画面上显示的颜色的区域的位置信息赋予ID，并与图像数据及颜色信息一起登录。此外，优选为，所述操作初始设定部对于在所述操作对象装置的操作画面上显示的字符中的、需要作为文字数据识别的字符赋予ID，并与字符的图像数据一起登录。此外，优选为，所述操作顺序制作部使用由所述操作初始设定部赋予ID并登录的信息来生成操作命令。此外，优选为，所述操作顺序制作部具备：图表制作部，其用于制作概念图表，该概念图表具有用于表示特定的系统的概念的概念构件和为了实现所述概念而按照功能的流程构成的实现构件；以及图表变换部，其将由所述图表制作部制作的概念图表变换为控制程序，所述图表制作部基于由操作者经由输入部输入的操作，将包含构成所述概念图表的所述概念构件及所述实现构件在内的多个构件显示在显示部上，并且将与所述构件的每一个相关的信息和规定所述构件彼此的关系的信息显示在所述显示部上。此外，优选为，所述操作信号输出部基于由所述操作顺序执行部执行的操作命令，将所述操作对象装置的键盘、鼠标或手写笔的操作信号发送给所述操作对象装置。此外，优选为，所述画面信息取得部基于由所述操作顺序执行部执行的操作命令，将在所述操作对象装置的显示装置上显示的图像和由所述操作初始设定部赋予ID并登录的图像数据进行对照。此外，优选为，所述画面信息取得部基于由所述操作顺序执行部执行的操作命令，将在所述操作对象装置的显示装置上显示的颜色和由所述操作初始设定部赋予ID并登录的颜色数据进行对照。此外，优选为，所述画面信息取得部基于由所述操作顺序执行部执行的操作命令，将在所述操作对象装置的显示装置上显示的字符和由所述操作初始设定部赋予ID并登录的文字数据进行匹配。此外，优选为，具备：模拟部，其使用所述操作对象装置的模拟器执行由所述操作顺序制作部生成的操作命令的实验；以及模拟器生成部，其生成所述操作对象装置的模拟器。此外，优选为，所述模拟器生成部使用由所述操作初始设定部赋予ID并登录的信息来生成模拟器。此外，优选为，所述一系列的操作命令是用于使所述操作对象装置正常停止的一系列的操作，所述操作顺序执行部对多个操作对象装置一并执行正常停止的操作。本专利技术的操作自动化方法是对操作对象装置自动执行一系列的操作命令的操作自动化方法，包括：生成所述一系列的操作命令的步骤；以及执行所述一系列的操作命令的步骤，在执行所述一系列的操作命令的步骤中，基于所执行的所述操作命令，将与所述操作对象装置的输入装置的操作信号相应的信号发送给所述操作对象装置，基于所执行的所述操作命令，取得在所述操作对象装置的显示装置上显示的画面的信息，并进行图像识别。根据本专利技术，能够提供一种不必改造装置本身就能够对任意的装置进行自动操作的操作自动化方法。专利技术的效果根据本专利技术，能够提供一种不必进行装置本身的改造，就能够对任意的装置进行自动操作的自动操作系统。此外，根据本专利技术，能够提供一种即便没有系统程序开发知识，也能够简单地制作对任意装置进行自动操作的系统的自动操作系统。附图说明图1是表示本专利技术的实施方式1的自动操作系统的构成的框图。图2是表示本专利技术的实施方式1的制造装置的操作自动化的顺序的概略的流程图。图3是表示本专利技术的实施方式1的在制造装置的显示装置上显示的操作画面的图。图4是表示本专利技术的实施方式1的概念图表制作画面的图。图5是表示在本专利技术的实施方式1的概念图表制作画面上粘贴构成概念图表的构件的状态的图。图6是表示显示了本专利技术的实施方式1的与构本文档来自技高网...

【技术保护点】
一种自动操作系统，其对于操作对象装置自动执行一系列的操作命令，该自动操作系统具备：操作顺序制作部，其生成所述一系列的操作命令；操作顺序执行部，其执行所述一系列的操作命令；操作信号输出部，其基于所执行的所述操作命令，将与所述操作对象装置的输入装置的操作信号相应的信号发送给所述操作对象装置；以及画面信息取得部，其基于所执行的所述操作命令，取得在所述操作对象装置的显示装置上显示的画面的信息，并进行图像识别。

【技术特征摘要】
【国外来华专利技术】2012.06.19 JP 2012-1377011.一种自动操作系统，其对于操作对象装置自动执行一系列的操作命
令，该自动操作系统具备：
操作顺序制作部，其生成所述一系列的操作命令；
操作顺序执行部，其执行所述一系列的操作命令；
操作信号输出部，其基于所执行的所述操作命令，将与所述操作对象
装置的输入装置的操作信号相应的信号发送给所述操作对象装置；以及
画面信息取得部，其基于所执行的所述操作命令，取得在所述操作对
象装置的显示装置上显示的画面的信息，并进行图像识别。
2.如权利要求1所述的自动操作系统，其中，
具备操作初始设定部，该操作初始设定部取得生成所述一系列的操作
命令时所需的所述操作对象装置的信息，对各个操作命令的设定所需的信
息赋予ID并登录。
3.如权利要求2所述的自动操作系统，其中，
所述操作初始设定部取得所述操作对象装置的全部操作画面，对于在
操作的过程中需要的显示信息的位置信息赋予ID，并与图像数据一起登录。
4.如权利要求2所述的自动操作系统，其中，
所述操作初始设定部对于在所述操作对象装置的操作画面上进行了键
盘输入的区域的位置信息赋予ID，并与所输入的文本数据一起登录。
5.如权利要求2所述的自动操作系统，其中，
所述操作初始设定部对于在所述操作对象装置的操作画面上进行了鼠
标操作的位置的位置信息赋予ID，并与鼠标操作的内容一起登录。
6.如权利要求2所述的自动操作系统，其中，
所述操作初始设定部对于在所述操作对象装置的操作画面上进行了手

\t写笔操作的位置的位置信息赋予ID，并与手写笔操作的内容一起登录。
7.如权利要求2所述的自动操作系统，其中，
所述操作初始设定部对于在所述操作对象装置的操作画面上需要识别
在画面上显示的颜色的区域的位置信息赋予ID，并与图像数据及颜色信息
一起登录。
8.如权利要求2所述的自动操作系统，其中，
所述操作初始设定部对于在所述操作对象装置的操作画面上显示的字
符中的、需要作为文字来数据识别的字符赋予ID，并与字符的图像数据一
起登录。
9.如权利要求2所述的自动操作系统，其中，
所述操作顺序制作部使用由所述操作初始设定部赋予ID并登录的信息
来生成操作命令。
10.如权利要求1所述的自动操作系统，其中，
所述操作顺序制作部具备：
图表制作部，其用于制作概念图表，该概念图表具有用于表示特定的
系统的概念的概念构件和为了实现所述概念而按照功能的流程构成的实现
构件；以及
图表变换部，其将由所述图表制作部制作的概念图表变换为控制程序，
所述图表制作部基于由操作者经由输入部输入的操作，将包含构成所
述概念图表的所述概念构件及所述实现构件在内的多个构件显示在显示部
...

【专利技术属性】
技术研发人员：薮崎弘芳，石川亨，
申请(专利权)人：日本电能株式会社，
类型：发明
国别省市：日本;JP