信息处理方法、装置及存储介质制造方法及图纸

本申请是关于一种信息处理方法、装置及存储介质。该方法包括：获取初始输入信息，确定初始输入信息的输入模态；利用与输入模态对应的输入转换策略，将初始输入信息转换为预设标准格式的输入表征；不同的输入模态对应有不同的输入转换策略；将预设标准格式的输入表征输入交互控制模块，得到响应信息，并确定对应于响应信息的输出模态；利用与输出模态对应的输出转换策略，将响应信息转换为目标输出结果；不同的输出模态对应有不同的输出转换策略。这样，交互控制模块能实现对不同模态的输入信息的统一处理，还可以自动选择与响应信息对应的输出模态，进而得到目标输出结果，即使存在不同模态的交互方式，也能给用户提供统一的交互体验。体验。体验。

【技术实现步骤摘要】
信息处理方法、装置及存储介质


[0001]本申请涉及计算机
，尤其涉及一种信息处理方法、装置及存储介质。

技术介绍

[0002]随着电子设备功能的增加，在实现人机交互的过程中，机器与人进行基于不同模态的交互也成为了可能。但是，由于不同模态的交互方式分别属于相对独立的体系，体验上是割裂的。
[0003]例如，目前大多数电子设备主要采用触屏交互为主的图形界面交互方式。随着虚拟智能助手以及智能音箱等设备的普及，语音交互逐渐成为另一大主流交互方式。但是相关技术中，语音交互与图形界面交互式属于两套相对独立的体系，在使用的过程中无法实现统一管理，使得用户体验较差。

技术实现思路

[0004]为克服相关技术中存在的问题，本申请提供一种信息处理方法、装置及存储介质。
[0005]根据本申请实施例的第一方面，提供一种信息处理方法，包括：
[0006]获取初始输入信息，并确定所述初始输入信息的输入模态；
[0007]利用与所述输入模态对应的输入转换策略，将所述初始输入信息转换为预设标准格式的输入表征；其中，不同的输入模态对应有不同的输入转换策略；
[0008]将所述预设标准格式的输入表征输入交互控制模块，得到响应信息，并确定对应于所述响应信息的输出模态；
[0009]利用与所述输出模态对应的输出转换策略，将所述响应信息转换为目标输出结果；其中，不同的输出模态对应有不同的输出转换策略。
[0010]在一些实施例中，所述方法还包括：
[0011]根据所述输入模态和预设的第一关联关系，确定与各个所述输入模态对应的输入转换策略；其中，所述第一关联关系用于表征输入模态和输入转换策略之间的映射关系；
[0012]根据所述输出模态和预设的第二关联关系，确定与各个所述输出模态对应的输出转换策略；其中，所述第二关联关系用于表征输出模态和输出转换策略之间的映射关系。
[0013]在一些实施例中，所述确定所述初始输入信息的输入模态，包括：
[0014]在所述初始输入信息包括第一语音信号的情况下，确定所述输入模态为语音输入模态；
[0015]所述利用与所述输入模态对应的输入转换策略，将所述初始输入信息转换为预设标准格式的输入表征，包括：
[0016]对所述第一语音信号进行语音识别处理，得到第一文本信息；
[0017]对所述第一文本信息进行语义提取处理，得到所述预设标准格式的输入表征。
[0018]在一些实施例中，所述确定所述初始输入信息的输入模态，包括：
[0019]在所述初始输入信息为基于界面输入的请求信息的情况下，确定所述输入模态为
界面输入模态；
[0020]所述利用与所述输入模态对应的输入转换策略，将所述初始输入信息转换为预设标准格式的输入表征，包括：
[0021]确定所述请求信息所针对的应用类型、所述请求信息的请求功能以及请求属性；
[0022]根据所述应用类型、所述请求功能以及所述请求属性，得到所述预设标准格式的输入表征。
[0023]在一些实施例中，所述确定所述初始输入信息的输入模态，包括：
[0024]在所述初始输入信息包括当前视觉图像的情况下，确定所述输入模态为视觉输入模态；
[0025]所述利用与所述输入模态对应的输入转换策略，将所述初始输入信息转换为预设标准格式的输入表征，包括：
[0026]根据所述当前视觉图像以及预先设置的预设视觉图像与预设输入表征之间的映射关系，得到所述预设标准格式的输入表征。
[0027]在一些实施例中，所述确定所述初始输入信息的输入模态，包括：
[0028]在所述初始输入信息包括场景信号的情况下，确定所述输入模态为场景输入模态；
[0029]所述利用与所述输入模态对应的输入转换策略，将所述初始输入信息转换为预设标准格式的输入表征，包括：
[0030]确定所述场景信号对应的信号来源、信号功能以及信号属性；
[0031]根据所述信号来源、所述信号功能以及所述信号属性，得到所述预设标准格式的输入表征。
[0032]在一些实施例中，所述将所述预设标准格式的输入表征输入交互控制模块，得到响应信息，包括：
[0033]将交互过程中的原始状态信息和所述输入表征输入所述交互控制模块，得到更新后的状态信息；
[0034]根据所述更新后的状态信息和所述输入表征，得到所述响应信息；
[0035]所述确定对应于所述响应信息的输出模态，包括：
[0036]根据所述响应信息所包含的决策内容，确定与所述响应信息对应的输出模态。
[0037]在一些实施例中，所述根据所述响应信息所包含的决策内容，确定与所述响应信息对应的输出模态，包括：
[0038]如果所述响应信息所包含的决策内容指示进行语音播放，则确定所述输出模态为语音输出模态；
[0039]所述利用与所述输出模态对应的输出转换策略，将所述响应信息转换为目标输出结果，包括：
[0040]在确定输出模态为语音输出模态的情况下，将所述决策内容转换为语音格式，并将转换为语音格式的决策内容确定为所述目标输出结果。
[0041]在一些实施例中，所述根据所述响应信息所包含的决策内容，确定与所述响应信息对应的输出模态，包括：
[0042]如果所述响应信息所包含的决策内容指示进行界面展示，则确定所述输出模态为
界面输出模态；
[0043]所述利用与所述输出模态对应的输出转换策略，将所述响应信息转换为目标输出结果，包括：
[0044]在确定输出模态为界面输出模态的情况下，将所述决策内容转换为界面格式，并将转换为界面格式的决策内容确定为所述目标输出结果；
[0045]其中，所述界面格式的决策内容包括：页面地址和数据内容。
[0046]在一些实施例中，所述根据所述响应信息所包含的决策内容，确定与所述响应信息对应的输出模态，包括：
[0047]如果所述响应信息所包含的决策内容指示进行功能执行，则确定所述输出模态为功能输出模态；
[0048]所述利用与所述输出模态对应的输出转换策略，将所述响应信息转换为目标输出结果，包括：
[0049]在确定输出模态为功能输出模态的情况下，将所述决策内容转换为命令格式，并将转换为命令格式的决策内容确定为所述目标输出结果；
[0050]其中，所述命令格式的决策内容包括：功能类型和功能参数。
[0051]在一些实施例中，所述方法还包括：
[0052]在得到所述目标输出结果之后，根据所述初始输入信息、所述输入表征、所述响应信息以及所述目标输出结果，对所述交互控制模块的配置参数进行更新。
[0053]根据本申请实施例的第二方面，提供一种信息处理装置，包括：
[0054]第一确定模块，配置为获取初始输入信息，并确定所述初始输入信息的输入模态；
[0055]第一转换模块，配置为利用与本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种信息处理方法，其特征在于，所述方法包括：获取初始输入信息，并确定所述初始输入信息的输入模态；利用与所述输入模态对应的输入转换策略，将所述初始输入信息转换为预设标准格式的输入表征；其中，不同的输入模态对应有不同的输入转换策略；将所述预设标准格式的输入表征输入交互控制模块，得到响应信息，并确定对应于所述响应信息的输出模态；利用与所述输出模态对应的输出转换策略，将所述响应信息转换为目标输出结果；其中，不同的输出模态对应有不同的输出转换策略。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：根据所述输入模态和预设的第一关联关系，确定与各个所述输入模态对应的输入转换策略；其中，所述第一关联关系用于表征输入模态和输入转换策略之间的映射关系；根据所述输出模态和预设的第二关联关系，确定与各个所述输出模态对应的输出转换策略；其中，所述第二关联关系用于表征输出模态和输出转换策略之间的映射关系。3.根据权利要求1所述的方法，其特征在于，所述确定所述初始输入信息的输入模态，包括：在所述初始输入信息包括第一语音信号的情况下，确定所述输入模态为语音输入模态；所述利用与所述输入模态对应的输入转换策略，将所述初始输入信息转换为预设标准格式的输入表征，包括：对所述第一语音信号进行语音识别处理，得到第一文本信息；对所述第一文本信息进行语义提取处理，得到所述预设标准格式的输入表征。4.根据权利要求1所述的方法，其特征在于，所述确定所述初始输入信息的输入模态，包括：在所述初始输入信息为基于界面输入的请求信息的情况下，确定所述输入模态为界面输入模态；所述利用与所述输入模态对应的输入转换策略，将所述初始输入信息转换为预设标准格式的输入表征，包括：确定所述请求信息所针对的应用类型、所述请求信息的请求功能以及请求属性；根据所述应用类型、所述请求功能以及所述请求属性，得到所述预设标准格式的输入表征。5.根据权利要求1所述的方法，其特征在于，所述确定所述初始输入信息的输入模态，包括：在所述初始输入信息包括当前视觉图像的情况下，确定所述输入模态为视觉输入模态；所述利用与所述输入模态对应的输入转换策略，将所述初始输入信息转换为预设标准格式的输入表征，包括：根据所述当前视觉图像以及预先设置的预设视觉图像与预设输入表征之间的映射关系，得到所述预设标准格式的输入表征。6.根据权利要求1所述的方法，其特征在于，所述确定所述初始输入信息的输入模态，
包括：在所述初始输入信息包括场景信号的情况下，确定所述输入模态为场景输入模态；所述利用与所述输入模态对应的输入转换策略，将所述初始输入信息转换为预设标准格式的输入表征，包括：确定所述场景信号对应的信号来源、信号功能以及信号属性；根据所述信号来源、所述信号功能以及所述信号属性，得到所述预设标准格式的输入表征。7.根据权利要求1所述的方法，其特征在于，所述将所述预设标准格式的输入表征输入交互控制模块，得到响应信息，包括：将交互过程中的原始状态信息和所述输入表征输入所述交互控制模块，得到更新后的状态信息；根据所述更...

【专利技术属性】
技术研发人员：陆晨昱，
申请(专利权)人：斑马网络技术有限公司，
类型：发明
国别省市：