1.本技术涉及知识图谱技术领域,尤其涉及一种数据检索方法、系统、电子设备及介质。
背景技术:
2.随着互联网、电子技术的快速发展,越来越多的人追求大规模的知识库的高效率检索。基于语义分析的检索方法是通过构建一个将自然语言问题(nl question)转化为可以被知识图谱执行的中介逻辑形式(intermedia logic form)。然而,传统的语义分析其需要标注好的逻辑形式作为监督(supervision),并且受制于只有少量逻辑谓词狭窄域。基于信息检索的知识库问答方法,则直接借助问题所传达的信息从知识图谱上检索答案,不需要人工编制规则并且能够扩展到更大更复杂的知识图谱上。但是随着图谱规模的扩大,信息检索的效率也随之变得低下。然而,如何提高大规模知识图谱检索效率成为一个亟待解决的问题。
技术实现要素:
3.本技术实施例提供了一种数据检索方法、系统、电子设备及介质,以至少通过本发明解决了大规模知识图谱检索效率低等问题。
4.本发明提供了数据检索方法,包括:
5.问答路径构建步骤:根据问答数据构建知识图谱后,通过知识图谱原型来构建问答路径;
6.候选路径获取步骤:抽取所述问答路径中的问题的问题特征,获取所述问题特征后,过滤所述问答路径获取候选路径特征,将所述问题特征与所述候选路径特征进行匹配,获得候选路径;
7.返回结果获取步骤:对所述候选路径进行查询语句构建操作,获得查询语句后,通过所述查询语句查询所述知识图谱获得知识图谱的返回结果;
8.最终返回结果获取步骤:对所述返回结果进行格式化获得最终返回结果,并将所述最终返回结果返回给用户端。
9.上述的数据检索方法中,所述问答路径构建步骤包括,根据问答数据,通过所述知识图谱原型构建所述问答数据相关的所述知识图谱后,通过所述知识图谱原型来构建所述问答路径。
10.上述的数据检索方法中,所述候选路径获取步骤包括:
11.问题特征步骤:对所述问答路径中的所述问题进行问题解析并抽取所述问题特征,获取所述问题特征;
12.候选路径特征获取步骤:通过相应规则过滤所述问答路径,获取所述候选路径特征;
13.候选路径生成步骤:通过特征匹配模块将所述问题特征与所述候选路径特征进行
匹配,获得置信度最高的所述候选路径。
14.上述的数据检索方法中,所述返回结果获取步骤包括,对所述候选路径进行自动化的所述查询语句构建操作获得所述查询语句后,将所述问题特征填充到所述查询语句中,通过所述查询语句查询所述知识图谱获得所述知识图谱的所述返回结果。
15.本发明还提供数据检索系统,其中,适用于上述所述的数据检索方法,所述数据检索系统包括:
16.问答路径构建单元:根据问答数据构建知识图谱后,通过知识图谱原型来构建问答路径;
17.候选路径获取单元:抽取所述问答路径中的问题的问题特征,获取所述问题特征后,过滤所述问答路径获取候选路径特征,将所述问题特征与所述候选路径特征进行匹配,获得候选路径;
18.返回结果获取单元:对所述候选路径进行查询语句构建操作,获得查询语句后,通过所述查询语句查询所述知识图谱获得知识图谱的返回结果;
19.最终返回结果获取单元:对所述返回结果进行格式化获得最终返回结果,并将所述最终返回结果返回给用户端。
20.上述的数据检索系统中,根据问答数据,通过所述问答路径构建单元中所述知识图谱原型构建所述问答数据相关的所述知识图谱后,通过所述知识图谱原型来构建所述问答路径。
21.上述的数据检索系统中,所述候选路径获取单元包括:
22.问题特征模块:对所述问答路径中的所述问题进行问题解析并抽取所述问题特征,获取所述问题特征;
23.候选路径特征获取模块:通过相应规则过滤所述问答路径,获取所述候选路径特征;
24.候选路径生成模块:通过特征匹配模块将所述问题特征与所述候选路径特征进行匹配,获得置信度最高的所述候选路径。
25.上述的数据检索系统中,对所述候选路径进行自动化的所述查询语句构建操作获得所述查询语句后,将所述问题特征填充到所述查询语句中,所述查询语句查询所述知识图谱后,通过所述返回结果获取单元获得所述知识图谱的所述返回结果。
26.本发明还提供一种电子设备,包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现上述任一项所述的数据检索方法。
27.本发明还提供一种电子设备可读存储介质,所述电子设备可读存储介质上存储有计算机程序指令,所述计算机程序指令被所述处理器执行时实现上述任一项所述的数据检索方法。
28.相比于相关技术,本发明提出的一种数据检索方法、系统、电子设备及介质,解决了现有技术中所存在的大规模知识图谱检索效率低等问题,并提高了知识推理能力。
29.本技术的一个或多个实施例的细节在以下附图和描述中提出,以使本技术的其他特征、目的和优点更加简明易懂。
附图说明
30.此处所说明的附图用来提供对本技术的进一步理解,构成本技术的一部分,本技术的示意性实施例及其说明用于解释本技术,并不构成对本技术的不当限定。在附图中:
31.图1是根据本技术实施例的数据检索方法流程图;
32.图2是根据本技术实施例的数据检索框架图;
33.图3是根据本技术实施例的知识库构建模块框架图;
34.图4是根据本技术实施例的问答路径构建模块框架图;
35.图5是根据本技术实施例的问题解析以及路径过滤模块框架图;
36.图6是根据本技术实施例的候选路径获取模块框架图;
37.图7是根据本技术实施例的查询语句生成模块框架图;
38.图8是根据本技术实施例的结果返回模块框架图;
39.图9为本发明的情感分类系统的结构示意图;
40.图10是根据本技术实施例的电子设备的框架图。
41.其中,附图标记为:
42.问答路径构建单元:51;
43.候选路径获取单元:52;
44.返回结果获取单元:53;
45.最终返回结果获取单元:54;
46.问题特征模块:521;
47.候选路径特征获取模块:522;
48.候选路径生成模块:523
49.总线:80;
50.处理器:81;
51.存储器:82;
52.通信接口:83。
具体实施方式
53.为了使本技术的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本技术进行描述和说明。应当理解,此处所描述的具体实施例仅仅用以解释本技术,并不用于限定本技术。基于本技术提供的实施例,本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例,都属于本技术保护的范围。
54.显而易见地,下面描述中的附图仅仅是本技术的一些示例或实施例,对于本领域的普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图将本技术应用于其他类似情景。此外,还可以理解的是,虽然这种开发过程中所作出的努力可能是复杂并且冗长的,然而对于与本技术公开内容相关的本领域的普通技术人员而言,在本技术揭露的技术内容基础上进行的一些设计,制造或者生产等变更只是常规的技术手段,不应当理解为本技术公开的内容不充分。
55.在本技术中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本技术的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相
同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域普通技术人员显式地和隐式地理解的是,本技术所描述的实施例在不冲突的情况下,可以与其它实施例相结合。
56.除非另作定义,本技术所涉及的技术术语或者科学术语应当为本技术所属技术领域内具有一般技能的人士所理解的通常意义。本技术所涉及的“一”、“一个”、“一种”、“该”等类似词语并不表示数量限制,可表示单数或复数。本技术所涉及的术语“包括”、“包含”、“具有”以及它们任何变形,意图在于覆盖不排他的包含;例如包含了一系列步骤或模块(单元)的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可以还包括没有列出的步骤或单元,或可以还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。本技术所涉及的“连接”、“相连”、“耦接”等类似的词语并非限定于物理的或者机械的连接,而是可以包括电气的连接,不管是直接的还是间接的。本技术所涉及的“多个”是指两个或两个以上。“和/或”描述关联对象的关联关系,表示可以存在三种关系,例如,“a和/或b”可以表示:单独存在a,同时存在a和b,单独存在b这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。本技术所涉及的术语“第一”、“第二”、“第三”等仅仅是区别类似的对象,不代表针对对象的特定排序。
57.本发明通过拆分信息检索方式的实现逻辑,使用基于问题以及路径计算匹配的方法,解决了大规模知识图谱检索的效率低下问题。
58.下面结合具体实施例对本发明进行说明。
59.实施例一
60.本实施例提供了数据检索方法。请参照图1至图8,图1是根据本技术实施例的数据检索方法流程图;图2是根据本技术实施例的数据检索框架图;图3是根据本技术实施例的知识库构建模块框架图;图4是根据本技术实施例的问答路径构建模块框架图;图5是根据本技术实施例的问题解析以及路径过滤模块框架图;图6是根据本技术实施例的候选路径获取模块框架图;图7是根据本技术实施例的查询语句生成模块框架图;图8是根据本技术实施例的结果返回模块框架图,如图1至图8所示,数据检索方法包括如下步骤:
61.问答路径构建步骤s1:根据问答数据构建知识图谱后,通过知识图谱原型来构建问答路径;
62.候选路径获取步骤s2:抽取所述问答路径中的问题的问题特征,获取所述问题特征后,过滤所述问答路径获取候选路径特征,将所述问题特征与所述候选路径特征进行匹配,获得候选路径;
63.返回结果获取步骤s3:对所述候选路径进行查询语句构建操作,获得查询语句后,通过所述查询语句查询所述知识图谱获得知识图谱的返回结果;
64.最终返回结果获取步骤s4:对所述返回结果进行格式化获得最终返回结果,并将所述最终返回结果返回给用户端。
65.在实施例中,所述问答路径构建步骤s1包括,根据问答数据,通过所述知识图谱原型构建所述问答数据相关的所述知识图谱后,通过所述知识图谱原型来构建所述问答路径。
66.在具体实施中,根据问答数据,通过知识图谱原型构建问答数据相关的知识图谱后,再通过知识图谱原型来构建问答路径,该问答路径可以是多条的问答信息。
67.在实施例中,所述候选路径获取步骤s2包括:
68.问题特征步骤s21:对所述问答路径中的所述问题进行问题解析并抽取所述问题特征,获取所述问题特征;
69.候选路径特征获取步骤s22:通过相应规则过滤所述问答路径,获取所述候选路径特征;
70.候选路径生成步骤s23:通过特征匹配模块将所述问题特征与所述候选路径特征进行匹配,获得置信度最高的所述候选路径。
71.在具体实施中,对问答路径构建步骤s1中获取到的问答路径中的问题进行问题解析并抽取问题特征,获取问题特征,例如:提及实体类型、问句意图实体、问句形式、限定条件etc。获取问题特征之后,通过实体词过滤、意图过滤etc)的方式过滤问答路径,获取候选路径特征。最后通过特征匹配模块将上述获取到的问题特征与问答路径构建步骤s1中的候选路径特征进行匹配,获得置信度最高的候选路径。
72.在实施例中,所述返回结果获取步骤s3包括,对所述候选路径进行自动化的所述查询语句构建操作获得所述查询语句后,将所述问题特征填充到所述查询语句中,通过所述查询语句查询所述知识图谱获得所述知识图谱的所述返回结果。
73.在具体实施中,对问答路径构建步骤s1中的候选路径进行自动化的查询语句构建操作获得查询语句后,将候选路径获取步骤s2中的问题特征填充到上述获取到的查询语句中后,通过查询语句查询知识图谱获得知识图谱中的返回结果。
74.在实施例中,所述最终返回结果获取步骤s4包括,对所述返回结果进行格式化获得最终返回结果,并将所述最终返回结果返回给用户端。
75.在具体实施中,对返回结果获取步骤s3中的返回结果进行格式化获得最终返回结果,并将所述最终返回结果返回给用户端。其中,返回结果格式化操作包括,准确结果、扩展图、查询路径。
76.实施例二
77.请参照图9,图9为本发明的数据检索系统的结构示意图。如图9所示,发明的数据检索系统,适用于上述的数据检索方法,所述数据检索系统,包括:
78.问答路径构建单元51:根据问答数据构建知识图谱后,通过知识图谱原型来构建问答路径;
79.候选路径获取单元52:抽取所述问答路径中的问题的问题特征,获取所述问题特征后,过滤所述问答路径获取候选路径特征,将所述问题特征与所述候选路径特征进行匹配,获得候选路径;
80.返回结果获取单元53:对所述候选路径进行查询语句构建操作,获得查询语句后,通过所述查询语句查询所述知识图谱获得知识图谱的返回结果;
81.最终返回结果获取单元54:对所述返回结果进行格式化获得最终返回结果,并将所述最终返回结果返回给用户端。
82.在实施例中,根据问答数据,通过所述问答路径构建单元51中所述知识图谱原型构建所述问答数据相关的所述知识图谱后,通过所述知识图谱原型来构建所述问答路径。
83.在实施例中,所述候选路径获取单元52包括:
84.问题特征模块521:对所述问答路径中的所述问题进行问题解析并抽取所述问题
特征,获取所述问题特征;
85.候选路径特征获取模块522:通过相应规则过滤所述问答路径,获取所述候选路径特征;
86.候选路径生成模块523:通过特征匹配模块将所述问题特征与所述候选路径特征进行匹配,获得置信度最高的所述候选路径。
87.在实施例中,对所述候选路径进行自动化的所述查询语句构建操作获得所述查询语句后,将所述问题特征填充到所述查询语句中,所述查询语句查询所述知识图谱后,通过所述返回结果获取单元53获得所述知识图谱的所述返回结果。
88.实施例三
89.结合图10所示,本实施例揭示了一种电子设备的一种具体实施方式。电子设备可以包括处理器81以及存储有计算机程序指令的存储器82。
90.具体地,上述处理器81可以包括中央处理器(cpu),或者特定集成电路(application specific integrated circuit,简称为asic),或者可以被配置成实施本技术实施例的一个或多个集成电路。
91.其中,存储器82可以包括用于数据或指令的大容量存储器。举例来说而非限制,存储器82可包括硬盘驱动器(hard disk drive,简称为hdd)、软盘驱动器、固态驱动器(solid state drive,简称为ssd)、闪存、光盘、磁光盘、磁带或通用串行总线(universal serial bus,简称为usb)驱动器或者两个或更多个以上这些的组合。在合适的情况下,存储器82可包括可移除或不可移除(或固定)的介质。在合适的情况下,存储器82可在异常数据监测装置的内部或外部。在特定实施例中,存储器82是非易失性(non
‑
volatile)存储器。在特定实施例中,存储器82包括只读存储器(read
‑
only memory,简称为rom)和随机存取存储器(random access memory,简称为ram)。在合适的情况下,该rom可以是掩模编程的rom、可编程rom(programmable read
‑
only memory,简称为prom)、可擦除prom(erasable programmable read
‑
only memory,简称为fprom)、电可擦除prom(electrically erasable programmable read
‑
only memory,简称为efprom)、电可改写rom(electrically alterable read
‑
only memory,简称为earom)或闪存(flash)或者两个或更多个以上这些的组合。在合适的情况下,该ram可以是静态随机存取存储器(static random
‑
access memory,简称为sram)或动态随机存取存储器(dynamic random access memory,简称为dram),其中,dram可以是快速页模式动态随机存取存储器(fast page mode dynamic random access memory,简称为fpmdram)、扩展数据输出动态随机存取存储器(extended date out dynamic random access memory,简称为edodram)、同步动态随机存取内存(synchronous dynamic random
‑
access memory,简称sdram)等。
92.存储器82可以用来存储或者缓存需要处理和/或通信使用的各种数据文件,以及处理器81所执行的可能的计算机程序指令。
93.处理器81通过读取并执行存储器82中存储的计算机程序指令,以实现上述实施例中的任意数据检索方法。
94.在其中一些实施例中,电子设备还可包括通信接口83和总线80。其中,如图10所示,处理器81、存储器82、通信接口83通过总线80连接并完成相互间的通信。
95.通信接口83用于实现本技术实施例中各模块、装置、单元和/或设备之间的通信。
通信端口83还可以实现与其他部件例如:外接设备、图像/异常数据监测设备、数据库、外部存储以及图像/异常数据监测工作站等之间进行数据通信。
96.总线80包括硬件、软件或两者,将电子设备的部件彼此耦接在一起。总线80包括但不限于以下至少之一:数据总线(data bus)、地址总线(address bus)、控制总线(control bus)、扩展总线(expansion bus)、局部总线(local bus)。举例来说而非限制,总线80可包括图形加速接口(accelerated graphics port,简称为agp)或其他图形总线、增强工业标准架构(extended industry standard architecture,简称为eisa)总线、前端总线(front side bus,简称为fsb)、超传输(hyper transport,简称为ht)互连、工业标准架构(industry standard architecture,简称为isa)总线、无线带宽(infiniband)互连、低引脚数(low pin count,简称为lpc)总线、存储器总线、微信道架构(micro channel architecture,简称为mca)总线、外围组件互连(peripheral component interconnect,简称为pci)总线、pci
‑
express(pci
‑
x)总线、串行高级技术附件(serial advanced technology attachment,简称为sata)总线、视频电子标准协会局部(video electronics standards association local bus,简称为vlb)总线或其他合适的总线或者两个或更多个以上这些的组合。在合适的情况下,总线80可包括一个或多个总线。尽管本技术实施例描述和示出了特定的总线,但本技术考虑任何合适的总线或互连。
97.电子设备可连接数据检索系统,从而实现结合图1至图8的方法。
98.以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
99.综上所述,本发明通过提前构建可能的查询路径来提升大规模知识库的检索效率,并拆分了信息检索式的图谱问答逻辑,通过问题以及路径计算匹配的方法来获得最终的检索语句,解决了知识库检索效率低等问题,提高了大规模知识库的检索效率的同时提高了工作效率。
100.以上所述实施例仅表达了本技术的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本技术构思的前提下,还可以做出若干变形和改进,这些都属于本技术的保护范围。因此,本技术专利的保护范围应以所附权利要求的保护范围为准。
再多了解一些
本文用于企业家、创业者技术爱好者查询,结果仅供参考。