【技术实现步骤摘要】
本专利技术涉及基于图文操作示范下流程的创建的，尤其涉及一种基于图文操作示范下流程的创建方法以及设备。
技术介绍
1、在构建自动化流程的工作中，和外部系统交互是一个很常见的问题。通常在自动化工作流中要和外部的系统进行交互，可以通过调用外部系统开放的api实现，在现有技术中，传统方案通常使用屏幕录制的方法，记录用户的所有操作，并在使用过程中回放记录下来的操作序列，来实现对外部系统的交互，可是，需要进行人为的流程输入。
技术实现思路
1、本专利技术的目的在于克服现有技术的不足，本专利技术提供了一种基于图文操作示范下流程的创建方法以及设备，实时采集用户的需求信息，并基于用户的需求信息定义多个关键词；基于多个关键词配置图文操作示范；将图文操作示范输入至多模态模型，并输出操作指令；根据操作指令创建对应的流程，此时，基于多个关键词配置图文操作示范，以便于引入了图文操作示范，以便于对图文操作示范进行后续处理，从而将图文操作示范和多模态模型进行运算，实现了图像和文字的处理，以便于通过多模态模型来进行智能化的操作模拟，从而保证了操作指令的准确性，以便于保证了流程的顺畅性，不需要进行人为的流程输入，从而避免由于软件更新、卡顿、缩放等各种因素导致的流程实效问题。
2、为了解决上述技术问题，本专利技术实施例提供了一种基于图文操作示范下流程的创建方法，应用于流程的创建场景；所述基于图文操作示范下流程的创建方法包括：
3、实时采集用户的需求信息，并基于用户的需求信息定义多个关键词；>
4、基于多个关键词配置图文操作示范；
5、将图文操作示范输入至多模态模型，并输出操作指令；
6、根据操作指令创建对应的流程。
7、可选的，所述实时采集用户的需求信息，并基于用户的需求信息定义多个关键词，包括：
8、基于用户的声音特征或者文字特征触发采集系统；
9、根据采集系统实时采集用户的需求信息；
10、遍历用户的需求信息；
11、基于用户的需求信息进行信息筛选，并定义多个关键词。
12、可选的，所述实时采集用户的需求信息，并基于用户的需求信息定义多个关键词，包括：
13、定格用户的需求信息；
14、基于用户的需求信息定义关键字段；
15、根据义关键字段定义多个关键词；
16、基于多个关键词构建关键词体系。
17、可选的，所述基于多个关键词配置图文操作示范，包括：
18、获取多个关键词；
19、根据多个关键词定义操作示范主题；
20、基于操作示范主题形成对应的图文操作示范。
21、可选的，所述基于多个关键词配置图文操作示范，还包括：
22、采集图文操作示范；
23、将图文操作示范以及用户以往的爱好特征进行关联；
24、根据图文操作示范以及用户以往的爱好特征定义图文操作示范的呈现方式。
25、可选的，所述将图文操作示范输入至多模态模型，并输出操作指令，包括：
26、定格图文操作示范；
27、将图文操作示范输入至多模态模型，多模态模型基于以往的图文操作示范以及操作指令训练而成；
28、基于多模态模型输出对应的操作指令。
29、可选的，所述将图文操作示范输入至多模态模型，并输出操作指令，还包括：
30、基于图文操作示范的类型识别而输出对应的类型；
31、根据该类型触发多模态模型中的对应模块，并基于该模块对图文操作示范进行测试。
32、可选的，所述根据操作指令创建对应的流程，包括：
33、获取操作指令；
34、基于操作指令形成对应的子流程；
35、根据多个子流程创建对应的流程。
36、可选的，所述根据操作指令创建对应的流程，还包括：
37、定格流程；
38、基于流程进行虚拟测试，并定义流程中的异常子流程，并触发异常子流程的自发修复。
39、可选的，一种基于图文操作示范下流程的创建系统，其特征在于，所述基于图文操作示范下流程的创建系统应用于上述的基于图文操作示范下流程的创建方法，所述基于图文操作示范下流程的创建系统包括：
40、关键词模块，用于实时采集用户的需求信息，并基于用户的需求信息定义多个关键词；
41、图文操作示范模块，用于基于多个关键词配置图文操作示范；
42、操作指令模块，用于将图文操作示范输入至多模态模型，并输出操作指令；
43、流程模块，用于根据操作指令创建对应的流程。
44、在本专利技术实施例中，通过本专利技术实施例中的方法，实时采集用户的需求信息，并基于用户的需求信息定义多个关键词；基于多个关键词配置图文操作示范；将图文操作示范输入至多模态模型，并输出操作指令；根据操作指令创建对应的流程，此时，基于多个关键词配置图文操作示范，以便于引入了图文操作示范，以便于对图文操作示范进行后续处理，从而将图文操作示范和多模态模型进行运算，实现了图像和文字的处理，以便于通过多模态模型来进行智能化的操作模拟，从而保证了操作指令的准确性，以便于保证了流程的顺畅性，不需要进行人为的流程输入，从而避免由于软件更新、卡顿、缩放等各种因素导致的流程实效问题。
本文档来自技高网...【技术保护点】
1.一种基于图文操作示范下流程的创建方法，其特征在于，应用于流程的创建场景；所述基于图文操作示范下流程的创建方法包括：
2.根据权利要求1所述的基于图文操作示范下流程的创建方法，其特征在于，所述实时采集用户的需求信息，并基于用户的需求信息定义多个关键词，包括：
3.根据权利要求2所述的基于图文操作示范下流程的创建方法，其特征在于，所述实时采集用户的需求信息，并基于用户的需求信息定义多个关键词，包括：
4.根据权利要求3所述的基于图文操作示范下流程的创建方法，其特征在于，所述基于多个关键词配置图文操作示范，包括：
5.根据权利要求4所述的基于图文操作示范下流程的创建方法，其特征在于，所述基于多个关键词配置图文操作示范，还包括：
6.根据权利要求5所述的基于图文操作示范下流程的创建方法，其特征在于，所述将图文操作示范输入至多模态模型，并输出操作指令，包括：
7.根据权利要求6所述的基于图文操作示范下流程的创建方法，其特征在于，所述将图文操作示范输入至多模态模型，并输出操作指令，还包括：
8.根据权利要
9.根据权利要求8所述的基于图文操作示范下流程的创建方法，其特征在于，所述根据操作指令创建对应的流程，还包括：
10.一种基于图文操作示范下流程的创建系统，其特征在于，所述基于图文操作示范下流程的创建系统应用于如权利要求1-9中任一所述的基于图文操作示范下流程的创建方法，所述基于图文操作示范下流程的创建系统包括：
...【技术特征摘要】
1.一种基于图文操作示范下流程的创建方法，其特征在于，应用于流程的创建场景；所述基于图文操作示范下流程的创建方法包括：
2.根据权利要求1所述的基于图文操作示范下流程的创建方法，其特征在于，所述实时采集用户的需求信息，并基于用户的需求信息定义多个关键词，包括：
3.根据权利要求2所述的基于图文操作示范下流程的创建方法，其特征在于，所述实时采集用户的需求信息，并基于用户的需求信息定义多个关键词，包括：
4.根据权利要求3所述的基于图文操作示范下流程的创建方法，其特征在于，所述基于多个关键词配置图文操作示范，包括：
5.根据权利要求4所述的基于图文操作示范下流程的创建方法，其特征在于，所述基于多个关键词配置图文操作示范，还包括：
6.根据权利要求5所...
【专利技术属性】
技术研发人员：曾国洋，
申请(专利权)人：北京面壁智能科技有限责任公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。