一种扩充问答库的方法、装置、电子设备及可读存储介质与流程

1.本技术涉及计算机技术领域，具体而言，涉及一种扩充问答库的方法、装置、电子设备及可读存储介质。


背景技术：

2.随着人工智能的快速发展，智能问答系统越来越多，用以解决用户针对业务提出的问题。
3.现有技术下，通常通过人工搜集大量的业务相关的问题与答案，并将问题与答案进行匹配，形成问答对，以及存储在数据库中。
4.但是，现有技术下通常需要人工对问答库进行扩充，需要耗费大量的时间成本和人工成本，效率较低。
5.由此，在进行对问答库扩充时，如何节约问答库扩充的时间和人工成本，是一个需要解决的技术问题。


技术实现要素：

6.本技术实施例的目的在于提供一种扩充问答库的方法、装置、电子设备及可读存储介质，用以在进行对问答库扩充时，节约问答库扩充的时间和人工成本。
7.一方面，提供一种扩充问答库的方法，包括：确定待扩充的目标问题对应的问题类别；获取针对问题类别设置的语料数据；采用预先训练好的问答匹配模型，从语料数据中，提取出目标问题匹配的目标答案，其中，问答匹配模型是基于有监督学习和无监督学习训练获得的；基于目标问题与目标答案，对问答库进行扩充。
8.在上述实现过程中，通过训练好的问答匹配模型，针对待扩充目标问题，从语料数据中，获取对应的目标答案，这样在扩充问答对时，无需耗费大量的人工迭代添加，以及大量的时间成本和人力成本，进而提高了问答对的扩充效率。
9.一种实施方式中，在获取针对问题类别设置的语料数据之前，还包括：获取分别针对每一问题类别设置的语料文本；按照指定字符，对针对每一问题类别设置的语料文本进行划分，获得针对每一问题类别设置的语料文本的至少一个子文本，子文本为语料数据。
10.在上述实现过程中，获取针对每一问题类别设置的语料文本，并按照指定字符对语料文本进行划分，获得语料数据，这样，在后续步骤中，可以直接获取针对问题类别设置的语料数据。
11.一种实施方式中，确定待扩充的目标问题对应的问题类别，包括：提取待扩充的目标问题中的至少一个关键词；分别将每一关键词与预设问题类别集合中每一问题类别进行匹配，确定至少一个关键词匹配的问题类别。
12.在上述实现过程中，提取目标问题中的关键词，根据关键词确定目标问题的问题类别，这样，就可以在后续步骤中，根据问题类别，基于训练好的问答匹配模型，获得对应的目标答案。
13.一种实施方式中，采用预先训练好的问答匹配模型，从语料数据中，提取出目标问题匹配的目标答案，包括：提取语料数据的文本特征向量，以及目标问题的问题特征向量；基于语料数据的文本特征向量，以及目标问题的问题特征向量，确定目标问题与各语料数据的问答匹配度；从各语料数据中，筛选高于预设匹配度的特征向量对应的答案；基于筛选出的答案，确定目标问题匹配的目标答案。
14.在上述实现过程中，基于训练好的问答匹配模型，针对目标问题，获得对应的目标答案，通过训练好的模型，获得待扩充的问答对，节省了耗费的人力成本，提高了扩充的效率。
15.一种实施方式中，在采用预先训练好的问答匹配模型，从语料数据中，提取出目标问题匹配的目标答案之前，还包括:基于训练集合，对初始问答匹配模型进行训练，获得训练好的问答匹配模型；其中，初始问答匹配模型基于有监督学习和无监督学习获得的。
16.在上述实现过程中，基于训练集合，训练问答匹配模型，基于训练好的问答匹配模型，获得目标问题对应的目标答案，节省了人力成本和时间成本，提高了扩充的效率。
17.一种实施方式中，在采用预先训练好的问答匹配模型，从语料数据中，提取出目标问题匹配的目标答案之前，还包括：获取正样本数据，正样本数据包含多个问答组合样本以及每一问答组合样本对应的匹配度，每一问答组合样本包括一个问题样本，以及一个问题样本对应的答案；将正样本数据中各问答组合样本中的问题和答案进行随机交换，获得负样本数据，负样本数据包含多个交换后的问答组合样本，以及相应的问答匹配度，每一问答组合样本包括一个问题样本，以及一个问题样本对应的答案；基于正样本数据和负样本数据，获得训练集合。
18.在上述实现过程中，获取训练集合，基于训练集合，训练问答匹配模型，就可以在后续步骤中，直接使用训练好的问答匹配模型，获得目标答案。
19.一种实施方式中，基于训练集合，对初始问答匹配模型进行训练，包括：分别提取训练集合中每一问答组合样本中答案的特征向量，以及对应的问题样本的内容向量；基于各问答组合样本中每一答案的特征向量，以及对应的问题样本的内容向量，分别获得每一问答组合样本的预测问答匹配度；基于预测问答匹配度以及设定问答匹配度，确定匹配度损失；若匹配度损失小于设定损失值，则获得训练好的问答匹配模型，否则，基于匹配度损失，调整初始问答匹配模型的模型参数，直至基于调整后的初始问答匹配模型确定出的匹配度损失小于设定损失值。
20.在上述实现过程中，基于训练集合，通过各问答组合样本的预测问答匹配度和设定问答匹配度，获得匹配度损失，并基于匹配度损失，调整初始问答匹配模型的参数，直到问答匹配模型训练完成，通过训练好的模型，获得待扩充的问答对，节省了耗费的人力成本，提高了扩充的效率。
21.一方面，提供一种扩充问答库的装置，包括：确定单元，用于确定待扩充的目标问题对应的问题类别；获取单元，用于获取针对问题类别设置的语料数据；提取单元，用于采用预先训练好的问答匹配模型，从语料数据中，提取出目标问题匹配的目标答案，其中，问答匹配模型是基于有监督学习和无监督学习训练获得的；扩充单元，用于基于目标问题与目标答案，对问答库进行扩充。
22.一种实施方式中，获取单元还用于：获取分别针对每一问题类别设置的语料文本；
按照指定字符，对针对每一问题类别设置的语料文本进行划分，获得针对每一问题类别设置的语料文本的至少一个子文本，子文本为语料数据。
23.一种实施方式中，确定单元具体用于：提取待扩充的目标问题中的至少一个关键词；分别将每一关键词与预设问题类别集合中每一问题类别进行匹配，确定至少一个关键词匹配的问题类别。
24.一种实施方式中，提取单元具体用于：提取语料数据的文本特征向量，以及目标问题的问题特征向量；基于语料数据的文本特征向量，以及目标问题的问题特征向量，确定目标问题与各语料数据的问答匹配度；从各语料数据中，筛选高于预设匹配度的特征向量对应的答案；基于筛选出的答案，确定目标问题匹配的目标答案。
25.一种实施方式中，提取单元还用于：基于训练集合，对初始问答匹配模型进行训练，获得训练好的问答匹配模型；其中，初始问答匹配模型基于有监督学习和无监督学习获得的。
26.一种实施方式中，提取单元还用于：获取正样本数据，正样本数据包含多个问答组合样本以及每一问答组合样本对应的匹配度，每一问答组合样本包括一个问题样本，以及一个问题样本对应的答案；将正样本数据中各问答组合样本中的问题和答案进行随机交换，获得负样本数据，负样本数据包含多个交换后的问答组合样本，以及相应的问答匹配度，每一问答组合样本包括一个问题样本，以及一个问题样本对应的答案；基于正样本数据和负样本数据，获得训练集合。
27.一种实施方式中，提取单元还用于：分别提取训练集合中每一问答组合样本中答案的特征向量，以及对应的问题样本的内容向量；基于各问答组合样本中每一答案的特征向量，以及对应的问题样本的内容向量，分别获得每一问答组合样本的预测问答匹配度；基于预测问答匹配度以及设定问答匹配度，确定匹配度损失；若匹配度损失小于设定损失值，则获得训练好的问答匹配模型，否则，基于匹配度损失，调整初始问答匹配模型的模型参数，直至基于调整后的初始问答匹配模型确定出的匹配度损失小于设定损失值。
28.一方面，提供了一种计算机程序产品，计算机程序产品在计算机上运行时，使得计算机执行如上述任一种扩充问答库的各种可选实现方式中提供的方法的步骤。
29.一方面，提供了一种电子设备，包括处理器以及存储器，存储器存储有计算机可读取指令，当计算机可读取指令由处理器执行时，运行如上述任一种扩充问答库的各种可选实现方式中提供的方法的步骤。
30.一方面，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时运行如上述任一种扩充问答库的各种可选实现方式中提供的方法的步骤。
31.本技术实施例提供的一种扩充问答库的方法、装置、电子设备及可读存储介质中，确定待扩充的目标问题对应的问题类别；获取针对问题类别设置的语料数据；采用预先训练好的问答匹配模型，从语料数据中，提取出目标问题匹配的目标答案，其中，问答匹配模型是基于有监督学习和无监督学习训练获得的；基于目标问题与目标答案，对问答库进行扩充。这样，在进行对问答库扩充时，无需耗费大量的人工迭代添加，以及大量的时间成本和人力成本，进而提高了问答对的扩充效率。
32.本技术的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本技术而了解。本技术的目的和其他优点可通过在所写的说明
书、权利要求书、以及附图中所特别指出的结构来实现和获得。
附图说明
33.为了更清楚地说明本技术实施例的技术方案，下面将对本技术实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本技术的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
34.图1为本技术实施例提供的一种扩充问答库的系统架构示意图；
35.图2为本技术实施例提供的一种扩充问答库的方法的实施流程图；
36.图3为本技术实施例提供的一种扩充问答库的方法的详细实施流程图；
37.图4为本技术实施例提供的一种扩充问答库的装置的结构框图；
38.图5为本技术实施方式中一种电子设备的结构示意图。
具体实施方式
39.下面将结合本技术实施例中附图，对本技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本技术一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本技术实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本技术的实施例的详细描述并非旨在限制要求保护的本技术的范围，而是仅仅表示本技术的选定实施例。基于本技术的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本技术保护的范围。
40.应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。同时，在本技术的描述中，术语“第一”、“第二”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
41.首先对本技术实施例中涉及的部分用语进行说明，以便于本领域技术人员理解。
42.终端设备：可以是移动终端、固定终端或便携式终端，例如移动手机、站点、单元、设备、多媒体计算机、多媒体平板、互联网节点、通信器、台式计算机、膝上型计算机、笔记本计算机、上网本计算机、平板计算机、个人通信系统设备、个人导航设备、个人数字助理、音频/视频播放器、数码相机/摄像机、定位设备、电视接收器、无线电广播接收器、电子书设备、游戏设备或者其任意组合，包括这些设备的配件和外设或者其任意组合。还可预见到的是，终端设备能够支持任意类型的针对用户的接口(例如可穿戴设备)等。
43.服务器：可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务以及大数据和人工智能平台等基础云计算服务的云服务器。
44.语料：语言材料，可以为百科资料、公司的条款，以及规定等。
45.有监督学习：是指用已知某种或某些特性的样本作为训练集，以建立一个数学模型，再用已建立的模型来预测未知样本。
46.无监督学习：根据没有标记类别的训练样本解决模式识别中的各种问题，称为无监督学习。
47.卷积神经网络(convolutional neural networks，cnn)：是一类包含卷积计算且具有深度结构的神经网络。
48.为了进行对问答库扩充时，可以提高问答库扩充的效率，本技术实施例提供了一种扩充问答库的方法、装置、电子设备及可读存储介质。
49.参阅图1所示，为本技术实施例提供的一种扩充问答库的系统架构示意图。该扩充问答库的系统架构包括问答匹配模块，以及问答库模块。其中，问答匹配模块，以及问答库模块可以为同一设备上，也可以不在同一设备上，其中上述设备可以为服务器，也可以为终端，在此不作限制。
50.其中，问答匹配模块用于：接收目标问题，并根据目标问题的问题类别，从语料数据中，提取出目标问题匹配的目标答案，以及将目标问题与目标答案，发送给问答库模块。
51.问答库模块用于：接收问答匹配模块发送的目标问题与目标答案，并将目标问题与目标答案以问答对的形式，存储到问答库中。
52.一种实施方式中，问答匹配模块接收待扩充的目标问题，并确定目标问题的问题类别，以及根据目标问题的问题类别，从语料数据中，提取目标问题对应的目标答案。问答匹配模块将目标问题与目标答案发送给问答库模块，问答库模块接收答匹配模块发送的目标问题与目标答案，并将目标问题与目标答案以问答对的形式，存储到问答库中。
53.这样，通过获得训练好的问答匹配模型，针对待扩充目标问题，从语料数据中，获取对应的目标答案，这样在扩充问答对时，无需耗费大量的人工迭代添加，节省了大量的时间成本和人力成本，进而提高了问答对的扩充效率。
54.本技术实施例中，仅以执行主体为服务器为例进行说明，实际应用中，执行主体也可以为终端设备等其他电子设备，在此不作限制。
55.参阅图2所示，为本技术实施例提供的一种扩充问答库的方法的实施流程图，该方法的具体实施流程如下：
56.步骤200：确定待扩充的目标问题对应的问题类别。
57.具体的，执行步骤200，可以执行以下步骤：
58.s2001：提取待扩充的目标问题中的至少一个关键词。
59.具体的，接收到待扩充的目标问题，通过关键词提取技术，提取待扩充的目标问题中的至少一个关键词。
60.可选的，关键词可以为产品名，实际应用中，根据实际应用情况，关键词也可以为其它词语，在此不作限制。
61.这样，就可以提取待扩充的目标问题中的至少一个关键词。
62.进一步的，在执行步骤s2001之前，还可以对待扩充的目标问题进行字符识别处理，识别并剔除无意义问句、少于预设字数的问句、特殊字符、表情，以及琐碎词语等。
63.其中，无意义问句可以为“今天天气好吗”，琐碎词语可以为“好的，谢谢”等。
64.其中，预设字数可以为4个。
65.实际应用中，预设字数的数量也可以根据实际应用场景进行设置，在此不作限制。
66.s2002：分别将每一关键词与预设问题类别集合中每一问题类别进行匹配，确定至少一个关键词匹配的问题类别。
67.具体的，分别将待扩充的目标问题中的每一关键词，分别与预设问题类别集合中
每一问题类别进行匹配，确定至少一个关键词匹配的问题类别。
68.其中，关键词可以为产品名。
69.可选的，预设问题类别集合可以为产品名关系映射表，实际应用中，根据实际应用情况，预设问题类别集合也可以为其它关键词集合，在此不作限制。
70.一种实施方式中，通过产品名关系映射表，分别将待扩充的目标问题中的每一关键词，分别与产品名关系映射中每一产品名类别进行匹配，确定至少一个关键词匹配到的产品类别，根据产品类别，确定问题类别。
71.其中，产品名关系映射表是根据“产品名标准名”与“产品别名”总结出来的关系映射表。
72.这样，就可以根据关键词，确定关键词类别，进而确定至少一个关键词匹配的问题类别。
73.步骤201：获取针对问题类别设置的语料数据。
74.具体的，获取针对目标问题的问题类别设置的语料数据。
75.可选的，语料数据可以包括产品介绍、条款，以及历史案例中的优秀回答中任意一种。
76.实际应用中，语料数据也可以为其它数据，在此不作限制。
77.进一步的，在执行步骤201之前，还可以执行以下步骤：
78.步骤一：获取分别针对每一问题类别设置的语料文本。
79.具体的，获取分别针对每一问题类别提前设置的语料文本。
80.步骤二：按照指定字符，对针对每一问题类别设置的语料文本进行划分，获得针对每一问题类别设置的语料文本的至少一个子文本。
81.具体的，按照指定字符，对针对每一问题类别设置的语料文本进行划分，获得针对每一问题类别设置的语料文本的一个或多个子文本。
82.其中，语料数据可以包含多个子文本。
83.可选的，指定字符可以为逗号、句号，以及换行符号，实际应用中，指定字符还可以为其它符号，在此不作限制。
84.其中，针对每一问题类别设置的语料文本的至少一个子文本中，每一子文本都包含对应的语料文本，以及被划分的部分语料文本。
85.一种实施方式中，语料文本可以为“aaa。bbb《换行》ccc。”，则按照指定字符，对上述语料文本进行划分，获得[[“aaa。bbb《换行》ccc。”，“aaa。”]，[“aaa。bbb《换行》ccc。”，“bbb。”]，[“aaa。bbb《换行》ccc。”，“ccc。”]]。
[0086]
这样，就可以按照指定字符，对针对每一问题类别设置的语料文本进行划分，获得针对每一问题类别设置的语料文本的至少一个子文本。
[0087]
步骤202：采用预先训练好的问答匹配模型，从语料数据中，提取出目标问题匹配的目标答案。
[0088]
其中，问答匹配模型是基于有监督学习和无监督学习构建的。
[0089]
具体的，执行步骤202，可以执行以下步骤：
[0090]
s2021：提取语料数据的文本特征向量，以及目标问题的问题特征向量。
[0091]
具体的，提取语料数据的文本特征向量，以及目标问题的问题特征向量。
[0092]
进一步的，还可以采用向量转换算法，将语料数据和目标问题转换为文本向量，并采用卷积核的方式，提取语料数据的文本特征向量和目标问题的问题特征向量。
[0093]
其中，向量转换算法可以为将文本转化为文本向量的算法。
[0094]
可选的，向量转换算法可以为基于卷积神经网络的文本分类算法(textcnn)和快速文本分类器(fasttext)。
[0095]
实际应用中，向量转换算法还可以为其它算法，在此不作限制。
[0096]
这样，就可以提取语料数据的文本特征向量，以及目标问题的问题特征向量。
[0097]
s2022：基于语料数据的文本特征向量，以及目标问题的问题特征向量，确定目标问题与各语料数据的问答匹配度。
[0098]
具体的，基于语料数据的文本特征向量，以及目标问题的问题特征向量，采用余弦相似度算法，计算目标答案与对应的各语料数据的匹配度。
[0099]
其中，余弦相似度算法的计算公式可以为：
[0100][0101]
其中，a表示目标问题的问题特征向量、b表示语料数据的文本特征向量，cos(a，b)表示余弦相似度，‖a‖表示特征向量a的模，‖b‖表示特征向量b的模，n表示目标问题和语料数据的个数，i表示从1到n的变量。
[0102]
实际应用中，也可以采用其它方法确定目标问题与各语料数据的匹配度，在此不作限制。
[0103]
这样，就可以基于语料数据的文本特征向量，以及目标问题的问题特征向量，确定目标问题与各语料数据的问答匹配度。
[0104]
进一步的，在获得目标问题与各语料数据的问答匹配度后，将目标问题与各语料数据对应的预料文本形成问答对，并按照问题类别，以预设顺序排列各问答对，以及将上述排序生成文档，作为知识库扩充材料进行输出。
[0105]
可选的，预设顺序可以为按照问答匹配度降序排列问答对或按照问答匹配度升序排列问答对。
[0106]
实际应用中，预设顺序还可以为其它方式，在此不作限制。
[0107]
s2023：从各语料数据中，筛选高于预设匹配度的特征向量对应的答案。
[0108]
具体的，从各语料数据中，筛选高于预设匹配度的特征向量对应的语料数据，并将其称为答案。
[0109]
可选的，预设匹配度的取值可以为70％。
[0110]
实际应用中，根据实际应用情况，预设匹配度的取值可以为其它取值，在此不作限制。
[0111]
这样，就可以从各语料数据中，筛选高于预设匹配度的特征向量对应的答案。
[0112]
s2024：基于筛选出的答案，确定目标问题匹配的目标答案。
[0113]
具体的，基于筛选出的目标问题对应的答案，确定目标问题匹配的目标答案。
[0114]
一种实施方式中，筛选出的答案有3个，分别与目标问题的匹配度为80％、75％、
90％，则挑选与目标问题匹配度最高的答案，作为目标问题匹配的目标答案。
[0115]
其中，还可以将筛选出的答案，都确定为目标问题匹配的目标答案。
[0116]
这样，就可以基于筛选出的答案，确定目标问题匹配的目标答案。
[0117]
进一步的，确定目标问题匹配的目标答案后，获得目标答案所在的语料文本，并将目标问题与语料文本组成问答对，存储到问答库中。
[0118]
进一步的，在执行步骤202之前，还可以执行以下步骤：
[0119]
步骤a：获取正样本数据。
[0120]
其中，正样本数据包含多个问答组合样本以及每一问答组合样本对应的问答匹配度，每一问答组合样本包括一个问题样本，以及一个问题样本对应的答案。
[0121]
其中，正样本中的问答匹配度可以为1。
[0122]
其中，一个答案通常可以回答多个问题样本，即问题样本之间可能为相似问题。
[0123]
其中，正样本数据包含的多个问答组合样本中，为每一相似问题样本匹配对应的答案。
[0124]
进一步的，正样本数据包含的多个问答组合样本中，每一问答组合样本还可以包括一个答案，以及一个或多个问题样本，在后续训练初始问答匹配模型时，每一问答组合样本可以根据一个答案，随机挑选一个对应的问题样本。
[0125]
这样，就可以获取正样本。
[0126]
步骤b：将正样本数据中各问答组合样本中的问题和答案进行随机交换，获得负样本数据。
[0127]
具体的，将正样本数据中各问答组合样本中的问题和答案进行随机交换，获得负样本数据。
[0128]
其中，负样本数据包含多个交换后的问答组合样本以及每一问答组合样本对应的问答匹配度，每一问答组合样本包括一个问题样本，以及一个问题样本对应的答案。
[0129]
其中，负样本中的问答匹配度可以为0。
[0130]
其中，一个答案通常可以回答多个问题样本，即问题样本之间可能为相似问题。
[0131]
其中，负样本数据包含的多个问答组合样本中，为每一相似问题样本匹配对应的答案。
[0132]
进一步的，负样本数据包含的多个问答组合样本中，每一问答组合样本还可以包括一个答案，以及一个或多个问题样本，在后续训练初始问答匹配模型时，每一问答组合样本可以根据一个答案，随机挑选一个对应的问题样本。
[0133]
这样，就可以获取负样本。
[0134]
步骤c：基于正样本数据和负样本数据，获得训练集合。
[0135]
具体的，由正样本数据和负样本数据，组成训练集合。
[0136]
这样，就获得了训练集合，用于在后续步骤中，训练初始问答匹配模型。
[0137]
步骤d：基于训练集合，对初始问答匹配模型进行训练，获得训练好的问答匹配模型。
[0138]
具体的，初始问答匹配模型可以为基于业内开源的预训练语言模型拼接权连接层构建的。
[0139]
其中，初始问答匹配模型初始问答匹配模型可以是基于业内开源的预训练语言模
型构建，并基于有监督学习和无监督学习训练获得的。
[0140]
可选的，业内开源的预训练语言模型可以为预训练的语言表征模型(bidirectional encoder representation from transformers，bert)或长短期记忆网络(long short-term memory，lstm)。
[0141]
实际应用中，还可以根据实际应用情况，采用其它语言模型，在此不作限制。
[0142]
其中，通过有监督学习，建立问题样本和对应的答案之间的关联。通过无监督学习，减少答案之间的关联。
[0143]
进一步的，在进行问答库扩充时，不需要大额的人为干涉，无监督学习可以多次进行。
[0144]
具体的，执行步骤d，可以执行以下步骤：
[0145]
步骤a：分别提取训练集合中每一问答组合样本中答案的特征向量，以及对应的问题样本的内容向量。
[0146]
具体的，分别提取训练集合中每一问答组合样本中答案的特征向量，以及对应的问题样本的内容向量。
[0147]
进一步的，还可以采用向量转换算法，将每一问答组合样本中答案和对应的问题样本转换为文本向量，并采用卷积核的方式，分别提取训练集合中每一问答组合样本中答案的特征向量，以及对应的问题样本的内容向量。
[0148]
其中，向量转换算法可以为将文本转化为文本向量的算法。
[0149]
可选的，向量转换算法可以为文本分类算法和快速文本分类器。
[0150]
实际应用中，根据实际应用情况，向量转换算法还可以为其它算法，在此不作限制。
[0151]
这样，就可以分别提取训练集合中每一问答组合样本中答案的特征向量，以及对应的问题样本的内容向量。
[0152]
步骤b：基于各问答组合样本中每一答案的特征向量，以及对应的问题样本的内容向量，分别获得每一问答组合样本的预测问答匹配度。
[0153]
具体的，基于各问答组合样本中每一答案的特征向量，以及对应的问题样本的内容向量，分别获得每一问答组合样本的预测问答匹配度。
[0154]
其中，预测匹配度的取值范围可以为0-1之间。
[0155]
实际应用中，根据实际应用情况，预测匹配度的取值范围也可以其它取值，在此不作限制。
[0156]
这样，就可以分别获得每一问答组合样本的预测问答匹配度。
[0157]
步骤c：基于预测问答匹配度以及设定问答匹配度，确定匹配度损失。
[0158]
具体的，根据获得的预测问答匹配度和预先设定问答匹配度，确定匹配度损失。
[0159]
其中，设定问答匹配度是预先设置的。
[0160]
可选的，设定问答匹配度的取值范围可以为0.6-0.9之间，也可以为其它，在此不作限制。
[0161]
其中，预先设置损失函数，根据损失函数，确定匹配度损失。
[0162]
可选的，损失函数可以为0-1损失函数、绝对值损失函数、log对数损失函数、平方损失函数、指数损失函数、感知损失函数，以及交叉熵损失函数等。
[0163]
实际应用中，根据实际应用情况，也可以采用其它损失函数，在此不作限制。
[0164]
这样，就可以基于预测问答匹配度以及设定问答匹配度，确定匹配度损失。
[0165]
步骤d：若匹配度损失小于设定损失值，则获得训练好的问答匹配模型，否则，基于匹配度损失，调整初始问答匹配模型的模型参数，直至基于调整后的初始问答匹配模型确定出的匹配度损失小于设定损失值。
[0166]
具体的，若匹配度损失小于设定损失值，则获得训练好的问答匹配模型，否则，基于匹配度损失，调整初始问答匹配模型的模型参数，直至基于调整后的初始问答匹配模型确定出的匹配度损失小于设定损失值，即获得训练好的问答匹配模型。
[0167]
这样，就获得训练好的问答匹配模型。
[0168]
步骤203：基于目标问题与目标答案，对问答库进行扩充。
[0169]
具体的，将获得的目标问题与目标答案组成问答对，并将该问答对添加到问答库中。
[0170]
这样，就完成对问答库的扩充。
[0171]
参阅图3所示，其为本技术实施例提供的一种扩充问答库的方法详细实施流程图，该方法的具体实施流程如下：
[0172]
步骤300：提取待扩充的目标问题中的至少一个关键词。
[0173]
步骤301：分别将每一关键词与预设问题类别集合中每一问题类别进行匹配，确定至少一个关键词匹配的问题类别。
[0174]
步骤302：获取分别针对每一问题类别设置的语料文本。
[0175]
步骤303：按照指定字符，对针对每一问题类别设置的语料文本进行划分，获得针对每一问题类别设置的语料文本的至少一个语料数据。
[0176]
步骤304：获取针对问题类别设置的语料数据。
[0177]
步骤305：提取语料数据的文本特征向量，以及目标问题的问题特征向量。
[0178]
步骤306：基于语料数据的文本特征向量，以及目标问题的问题特征向量，确定目标问题与各语料数据的问答匹配度。
[0179]
步骤307：从各语料数据中，筛选高于预设匹配度的特征向量对应的答案。
[0180]
步骤308：基于筛选出的答案，确定目标问题匹配的目标答案。
[0181]
步骤309：将目标问题与对应的目标答案扩充到问答库中。
[0182]
具体的，执行步骤300-步骤309时，具体步骤参见上述步骤200-步骤203，在此不做赘述。
[0183]
本技术实施例中，通过对比学习方法来构建训练集合，使得训练集合中样本更加丰富。通过训练集合训练问答匹配模型，有助于问答匹配模型在训练集合数据基础上训练的更加充分，从而达到充分的拟合，获得训练好的问答匹配模型，针对待扩充目标问题，从语料数据中，获取对应的目标答案，这样在扩充问答对时，无需耗费大量的人工迭代添加，以及大量的时间成本和人力成本，进而提高了问答对的扩充效率。
[0184]
如图4所示，其为本技术实施例提供的一种扩充问答库的装置的结构示意图，包括：确定单元401，用于确定待扩充的目标问题对应的问题类别；获取单元402，用于获取针对问题类别设置的语料数据；提取单元403，用于采用预先训练好的问答匹配模型，从语料数据中，提取出目标问题匹配的目标答案，其中，问答匹配模型是基于有监督学习和无监督
学习训练获得的；扩充单元404，用于基于目标问题与所述目标答案，对问答库进行扩充。
[0185]
一种实施方式中，获取单元402还用于：获取分别针对每一问题类别设置的语料文本；按照指定字符，对针对每一问题类别设置的语料文本进行划分，获得针对每一问题类别设置的语料文本的至少一个子文本，子文本为语料数据。
[0186]
一种实施方式中，确定单元401具体用于：提取待扩充的目标问题中的至少一个关键词；分别将每一关键词与预设问题类别集合中每一问题类别进行匹配，确定至少一个关键词匹配的问题类别。
[0187]
一种实施方式中，提取单元403具体用于：提取语料数据的文本特征向量，以及目标问题的问题特征向量；基于语料数据的文本特征向量，以及目标问题的问题特征向量，确定目标问题与各语料数据的问答匹配度；从各语料数据中，筛选高于预设匹配度的特征向量对应的答案；基于筛选出的答案，确定目标问题匹配的目标答案。
[0188]
一种实施方式中，提取单元403还用于：基于训练集合，对初始问答匹配模型进行训练，获得训练好的问答匹配模型；其中，初始问答匹配模型基于有监督学习和无监督学习获得的。
[0189]
一种实施方式中，提取单元403还用于：获取正样本数据，正样本数据包含多个问答组合样本以及每一问答组合样本对应的匹配度，每一问答组合样本包括一个问题样本，以及一个问题样本对应的答案；将正样本数据中各问答组合样本中的问题和答案进行随机交换，获得负样本数据，负样本数据包含多个交换后的问答组合样本，以及相应的问答匹配度，每一问答组合样本包括一个问题样本，以及一个问题样本对应的答案；基于正样本数据和负样本数据，获得训练集合。
[0190]
一种实施方式中，提取单元403还用于：分别提取训练集合中每一问答组合样本中答案的特征向量，以及对应的问题样本的内容向量；基于各问答组合样本中每一答案的特征向量，以及对应的问题样本的内容向量，分别获得每一问答组合样本的预测问答匹配度；基于预测问答匹配度以及设定问答匹配度，确定匹配度损失；若匹配度损失小于设定损失值，则获得训练好的问答匹配模型，否则，基于匹配度损失，调整初始问答匹配模型的模型参数，直至基于调整后的初始问答匹配模型确定出的匹配度损失小于设定损失值。
[0191]
由于上述装置及设备解决问题的原理与一种扩充问答库的方法相似，因此，上述装置的实施可以参见方法的实施，重复之处不再赘述。
[0192]
本技术实施例提供的一种扩充问答库的方法、装置、电子设备及可读存储介质中，确定待扩充的目标问题对应的问题类别；获取针对问题类别设置的语料数据；采用预先训练好的问答匹配模型，从语料数据中，提取出目标问题匹配的目标答案，其中，问答匹配模型是基于有监督学习和无监督学习训练获得的；基于目标问题与目标答案，对问答库进行扩充。这样，在进行对问答库扩充时，无需耗费大量的人工迭代添加，以及大量的时间成本和人力成本，进而提高了问答对的扩充效率。
[0193]
图5示出了一种电子设备5000的结构示意图。参阅图5所示，电子设备5000包括：处理器5010以及存储器5020，可选的，还可以包括电源5030、显示单元5040、输入单元5050。
[0194]
处理器5010是电子设备5000的控制中心，利用各种接口和线路连接各个部件，通过运行或执行存储在存储器5020内的软件程序和/或数据，执行电子设备5000的各种功能，从而对电子设备5000进行整体监控。
[0195]
本技术实施例中，处理器5010调用存储器5020中存储的计算机程序时执行如图2中所示的实施例提供的扩充问答库的方法。
[0196]
可选的，处理器5010可包括一个或多个处理单元；优选的，处理器5010可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器5010中。在一些实施例中，处理器、存储器、可以在单一芯片上实现，在一些实施例中，它们也可以在独立的芯片上分别实现。
[0197]
存储器5020可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、各种应用等；存储数据区可存储根据电子设备5000的使用所创建的数据等。此外，存储器5020可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件等。
[0198]
电子设备5000还包括给各个部件供电的电源5030(比如电池)，电源可以通过电源管理系统与处理器5010逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗等功能。
[0199]
显示单元5040可用于显示由用户输入的信息或提供给用户的信息以及电子设备5000的各种菜单等，本发明实施例中主要用于显示电子设备5000中各应用的显示界面以及显示界面中显示的文本、图片等对象。显示单元5040可以包括显示面板5041。显示面板5041可以采用液晶显示屏(liquid crystal display，lcd)、有机发光二极管(organic light-emitting diode，oled)等形式来配置。
[0200]
输入单元5050可用于接收用户输入的数字或字符等信息。输入单元5050可包括触控面板5051以及其他输入设备5052。其中，触控面板5051，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触摸笔等任何适合的物体或附件在触控面板5051上或在触控面板5051附近的操作)。
[0201]
具体的，触控面板5051可以检测用户的触摸操作，并检测触摸操作带来的信号，将这些信号转换成触点坐标，发送给处理器5010，并接收处理器5010发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板5051。其他输入设备5052可以包括但不限于物理键盘、功能键(比如音量控制按键、开关机按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
[0202]
当然，触控面板5051可覆盖显示面板5041，当触控面板5051检测到在其上或附近的触摸操作后，传送给处理器5010以确定触摸事件的类型，随后处理器5010根据触摸事件的类型在显示面板5041上提供相应的视觉输出。虽然在图5中，触控面板5051与显示面板5041是作为两个独立的部件来实现电子设备5000的输入和输出功能，但是在某些实施例中，可以将触控面板5051与显示面板5041集成而实现电子设备5000的输入和输出功能。
[0203]
电子设备5000还可包括一个或多个传感器，例如压力传感器、重力加速度传感器、接近光传感器等。当然，根据具体应用中的需要，上述电子设备5000还可以包括摄像头等其它部件，由于这些部件不是本技术实施例中重点使用的部件，因此，在图5中没有示出，且不再详述。
[0204]
本领域技术人员可以理解，图5仅仅是电子设备的举例，并不构成对电子设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件。
[0205]
本技术实施例中，一种可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时，使得通信设备可以执行上述实施例中的各个步骤。
[0206]
为了描述的方便，以上各部分按照功能划分为各模块(或单元)分别描述。当然，在实施本技术时可以把各模块(或单元)的功能在同一个或多个软件或硬件中实现。
[0207]
本领域内的技术人员应明白，本技术的实施例可提供为方法、系统、或计算机程序产品。因此，本技术可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本技术可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。
[0208]
本技术是参照根据本技术实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
[0209]
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
[0210]
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
[0211]
尽管已描述了本技术的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本技术范围的所有变更和修改。
[0212]
显然，本领域的技术人员可以对本技术进行各种改动和变型而不脱离本技术的精神和范围。这样，倘若本技术的这些修改和变型属于本技术权利要求及其等同技术的范围之内，则本技术也意图包含这些改动和变型在内。