语句意图类别识别方法及装置制造方法及图纸

本发明专利技术公开了一种语句意图类别识别方法及装置。该方法包括：提供问答日志信息，每条问答日志信息包括：问句和意图类别；根据从问句中获取的关键词生成词典；根据词典分别对每个问句进行向量化计算，得到每个问句的向量；根据每个问句的向量及对应的意图类别进行分类模型的训练，获取意图分类模型；对当前问句进行向量化计算，得到当前问句的向量，根据当前问句的向量和意图分类模型确定当前问句对应的意图类别。借助于本发明专利技术的技术方案，能够初步准确地识别用户的问句意图，提高语义理解的执行效率，降低了成本，节约了答案回复的时间，提高了用户的使用体验。

【技术实现步骤摘要】

本专利技术涉及计算机
，特别是涉及一种语句意图类别识别方法及装置。
技术介绍
在现有技术中，在对用户的问句进行意图分析时，是直接将当前问句与知识库中 的所有模板问句进行相似度计算，根据相似度最高的一个模板结构，分析用户的意图，理解 问句语义，整理返回对应的问题答案。但是，上述处理由于针对每个文件都要与所有模板问 句计算相似度，使得计算量非常大，从而导致了用户问句意图分析计算时间长，计算效率低 的问题。
技术实现思路
鉴于上述问题，提出了本专利技术以便提供一种克服上述问题或者至少部分地解决上 述问题的语句意图类别识别方法及装置。 本专利技术提供一种语句意图类别识别方法，包括： 提供问答日志信息，每条问答日志信息包括：问句和意图类别； 根据从问句中获取的关键词生成词典； 根据词典分别对每个问句进行向量化计算，得到每个问句的向量； 根据每个问句的向量及对应的意图类别进行分类模型的训练，获取意图分类模 型； 对当前问句进行向量化计算，得到当前问句的向量，根据当前问句的向量和意图 分类模型确定当前问句对应的意图类别。 本专利技术还提供了一种语句意图类别识别装置，包括： 提供模块，用于提供问答日志信息，每条问答日志信息包括：问句和意图类别； 生成模块，用于根据从问句中获取的关键词生成词典； 计算模块，用于根据词典分别对每个问句进行向量化计算，得到每个问句的向 量； 训练模块，用于根据每个问句的向量及对应的意图类别进行分类模型的训练，获 取意图分类模型； 识别模块，用于对当前问句进行向量化计算，得到当前问句的向量，根据当前问句 的向量和意图分类模型确定当前问句对应的意图类别。 本专利技术有益效果如下： 通过从问答系统中日志信息的问句中获取关键词，并利用这些关键词初步确定用 户的意图，解决了现有技术中用户问句意图分析计算时间长，计算效率低的问题，能够初步 准确地识别用户的问句意图，提高语义理解的执行效率，降低了成本，节约了答案回复的时 间，提高了用户的使用体验。 上述说明仅是本专利技术技术方案的概述，为了能够更清楚了解本专利技术的技术手段， 而可依照说明书的内容予以实施，并且为了让本专利技术的上述和其它目的、特征和优点能够 更明显易懂，以下特举本专利技术的【具体实施方式】。【附图说明】 通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通 技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本专利技术 的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中： 图1是本专利技术实施例的语句意图类别识别方法的流程图； 图2是本专利技术实施例的语句意图类别识别方法的详细处理的流程图； 图3是本专利技术实施例的语句意图类别识别装置的结构示意图。【具体实施方式】下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开 的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例 所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围 完整的传达给本领域的技术人员。 为了解决现有技术用户问句意图分析计算时间长，计算效率低的问题，本专利技术提 供了一种语句意图类别识别方法及装置，以下结合附图以及实施例，对本专利技术进行进一步 详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本专利技术，并不限定本专利技术。 方法实施例 根据本专利技术的实施例，提供了一种语句意图类别识别方法，图1是本专利技术实施例 的语句意图类别识别方法的流程图，如图1所示，根据本专利技术实施例的语句意图类别识别 方法包括如下处理： 步骤101，提供问答日志信息，每条问答日志信息包括：问句和意图类另I」。其中，上 述意图类别可以包括：天气、购物、工作、旅游等等； 步骤102,根据从问句中获取的关键词生成词典。 步骤102中生成词典具体包括如下处理： 步骤1021，根据从问句中获取的关键词生成词典包括： 步骤1022,对从问句获取的语料进行预处理，得到文本数据。其中，预处理包括： 将问句的格式统一为文本格式，过滤脏词、敏感词和停用词中的一种或多种，并将过滤后的 文本数据按照标点划分为多行。例如，上述标点可以是问号、叹号、分号或句号，也就是说， 可以将过滤后的文本数据按照问号、叹号、分号或句号划分为多行。 步骤1023,对文本数据进行分词处理，得到多个语料词语。在本专利技术实施例中，分 词处理可以采用字典双向最大匹配法、viterbi方法、HMM方法和CRF方法中的一种或多种。 步骤1024,对语料词语进行过滤处理，得到包括多个关键词的词典。其中，过滤处 理包括以下任一种或两种方式： 方式一：根据词性对语料词语进行过滤，保留名词、动词以及形容词； 方式二：根据频次对语料词语进行过滤，保留频次大于频次阈值的语料词语，其 中，频次是指语料词语在语料数据中出现的频率或者次数。 本实施例中，先根据词性对语料词语进行过滤，仅保留名词、动词以及形容词，去 除其它词性的语料词语；然后根据频次对保留的名词、动词以及形容词进行过滤，保留频次 大于频次阈值的语料词语，从而字典中为频次大于频次阈值的名词、动词和形容词。 在本专利技术的其它实施例中，可以仅根据词性进行过滤，也可以仅根据频次进行过 滤，还可以先根据频次进行过滤再根据词性进行过滤，其都在本专利技术的保护范围之内。 步骤1025,对词典进行降维处理。 其中，降维处理具体包括：根据问答日志统计问句对应的意图类别，计算词典中每 个关键词的信息熵，将信息熵小于信息熵阈值的关键词从词典中删除，其中，信息熵表示该 关键词在各意图类别中出现的概率。计算词典中关键词的信息熵包括：计算词典中每个关 键词在每个意图类别中出现的概率。 信息熵的计算公式为：Η(Χ) = -Σρ(Χ?)logp(Xi)，其中，H(X)表示关键词的信息 熵，P(Xl)表示关键词在第i个意图类别中出现的概率，i= 1，2,…，η，η为意图类别的个 数。 由于关键词的信息熵可以直接根据上述计算公式计算出来，计算复杂度非常低， 因此，本专利技术实施例的技术方案利用信息熵能够快速准确将信息熵小于信息熵阈值的关键 词从词典中删除，大大提高了词典降维的准确率和效率。 需要说明的是，在本专利技术的其它实施例中，也可以采用其它现有的方法进行降维 处理，如：SVD、LDA或PCA等，其不影响本专利技术的保护范围。 本专利技术实施例通过对词典进行降维，使得词典更加的准确和精简，在后续进行问 句的向量化计算和分类模型训练时，大大降低了计算的复杂度，有效提高了计算效率。 步骤103,根据词典分别对每个问句进行向量化计算，得到每个问句的向量。 在步骤103中，对问句进行向量化计算包括： 步骤1031，对问句进行预处理和分词处理。 其中，预处理具体包括：将问句的格式统一为文本格式，过滤脏词、敏感词和停用 词中的一种或多种，并将过滤后的文本数据按照标点划分为多行。例如，上述标点可以是问 号、叹号、分号或句号，也就是说，可以将过滤后的文本数据按照问号、叹号、分号或句号划 分为多行。 所述分词处理可以采用字典双向最大匹配法、viterbi方法、ΗΜΜ方法和CRF方法 中的一种或多种。 步骤1032,根据词典的大小和相应问句中出现的关键词的TF-IDF值，对该问句生 本文档来自技高网...

【技术保护点】
一种语句意图类别识别方法，其特征在于，包括：提供问答日志信息，每条问答日志信息包括：问句和意图类别；根据从所述问句中获取的关键词生成词典；根据所述词典分别对每个问句进行向量化计算，得到每个问句的向量；根据每个问句的向量及对应的意图类别进行分类模型的训练，获取意图分类模型；对当前问句进行向量化计算，得到当前问句的向量，根据所述当前问句的向量和所述意图分类模型确定当前问句对应的意图类别。

【技术特征摘要】

【专利技术属性】
技术研发人员：张昊，朱频频，
申请(专利权)人：上海智臻智能网络科技股份有限公司，
类型：发明
国别省市：上海;31