一种任务处理方法、装置、设备、介质及程序产品与流程

摘要: 本发明涉及智能交互,尤其涉及一种任务处理方法、装置、设备、介质及程序产品。背景技术:1、用户使用电子设备或电子设备上的应用程序时,需要主动操作与电子设备或应用程...
一种任务处理方法、装置、设备、介质及程序产品与流程

本发明涉及智能交互,尤其涉及一种任务处理方法、装置、设备、介质及程序产品。

背景技术:

1、用户使用电子设备或电子设备上的应用程序时,需要主动操作与电子设备或应用程序进行交互。为提升用户交互体验,降低操作成本,发展出了利用大模型进行智能交互的现有技术。

2、然而,现有技术是利用大模型依次输出并执行单个交互操作,无法单次输出多个操作,无法准确有序的执行输出的多个交互操作。

技术实现思路

1、本发明提供了一种任务处理方法、装置、设备、介质及程序产品,以实现多个交互操作的准确有序执行。

2、第一方面,本发明实施例提供了一种任务处理方法,包括:

3、响应于用户在当前页面发出的任务指令,从历史操作信息序列查找与所述任务指令匹配的参考操作信息序列;操作信息序列包括至少一个操作的操作属性信息;所述操作属性信息包括操作页面语义、操作动作、操作元素语义和操作元素位置;

4、根据所述参考操作信息序列和所述当前页面的结构化信息生成提示词,输入大模型,输出当前操作信息序列;所述当前操作信息序列包括至少一个候选操作的操作属性信息,所述结构化信息包括页面语义、页面元素语义和页面元素位置;

5、根据所述当前操作信息序列和所述当前页面的结构化信息,从所述当前操作信息序列中确定并执行与所述当前页面匹配的候选操作;以及,在进入新页面后,根据所述当前操作信息序列和所述新页面的结构化信息,从所述当前操作信息序列中确定并执行与所述新页面匹配的候选操作,直至所述当前操作信息序列执行结束。

6、第二方面,本发明实施例还提供了一种任务处理装置,包括:

7、查找模块,用于响应于用户在当前页面发出的任务指令,从历史操作信息序列查找与所述任务指令匹配的参考操作信息序列;操作信息序列包括至少一个操作的操作属性信息;所述操作属性信息包括操作页面语义、操作动作、操作元素语义和操作元素位置;

8、输出模块,用于根据所述参考操作信息序列和所述当前页面的结构化信息生成提示词,输入大模型,输出当前操作信息序列;所述当前操作信息序列包括至少一个候选操作的操作属性信息,所述结构化信息包括页面语义、页面元素语义和页面元素位置;

9、执行模块,用于根据所述当前操作信息序列和所述当前页面的结构化信息,从所述当前操作信息序列中确定并执行与所述当前页面匹配的候选操作;以及,在进入新页面后,根据所述当前操作信息序列和所述新页面的结构化信息,从所述当前操作信息序列中确定并执行与所述新页面匹配的候选操作,直至所述当前操作信息序列执行结束。

10、第三方面,本发明实施例还提供了一种电子设备,包括:

11、至少一个处理器;以及

12、与至少一个处理器通信连接的存储器;其中

13、存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够执行本发明任一实施例所提供的任务处理方法。

14、第四方面,本发明实施例还提供了一种计算机可读存储介质,计算机可读存储介质存储有计算机指令,计算机指令用于使处理器执行时实现本发明任一实施例的任务处理方法。

15、第五方面,本发明实施例还提供了一种计算机程序产品,其特征在于,计算机程序产品包括计算机程序,计算机程序在被处理器执行时实现本发明任一实施例的任务处理方法。

16、本发明实施例能够响应于用户在当前页面发出的任务指令,通过查找历史操作信息序列,并将历史操作信息序列与当前页面的结构化信息作为提示词输入大模型,输出包括多个候选操作的当前操作信息序列,实现了单次生成多操作序列,相较于现有技术重复生成提示词使大模型输出单个步骤的技术方案,避免了多次重复生成提示词和调用大模型的操作,提高了交互效率;并且根据每一页面的结构化信息从所述当前操作信息序列中确定并执行与所述每一页面匹配的候选操作,能够根据实时页面的结构化信息,从当前操作信息序列中准确选取匹配的候选操作执行,从而实现当前操作信息序列中多个操作的准确有序执行,保障了多操作执行的准确性和连贯性。

17、应当理解,本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征,也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

1.一种任务处理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述根据所述当前操作信息序列和所述当前页面的结构化信息,从所述当前操作信息序列中确定并执行与所述当前页面匹配的候选操作,包括:

3.根据权利要求2所述的方法,其特征在于,所述在所述当前操作信息序列中,确定与所述当前页面匹配的第一候选操作,包括:

4.根据权利要求2所述的方法,其特征在于,所述计算所述第一候选操作的操作信息与所述当前页面的结构化信息之间的目标匹配度,包括:

5.根据权利要求1所述的方法,其特征在于,所述根据所述当前操作信息序列和所述新页面的结构化信息,从所述当前操作信息序列中确定并执行与所述新页面匹配的候选操作,包括:

6.根据权利要求1所述的方法,其特征在于,所述历史操作信息序列,通过如下方式确定:

7.一种任务处理装置,其特征在于,所述装置包括:

8.一种电子设备,其特征在于,所述电子设备包括:

9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求1-6中任一项所述的任务处理方法。

10.一种计算机程序产品,其特征在于,所述计算机程序产品包括计算机程序,所述计算机程序在被处理器执行时实现权利要求1-6中任一项所述的任务处理方法。