界面交互的方法、装置、设备和程序产品与流程

摘要: 本文的示例总体涉及计算机领域,特别地涉及界面交互的方法、装置、设备和程序产品。背景技术:1、在多模态问答场景中,用户常常需要基于图像内容向智能系统提出问题,并期...
界面交互的方法、装置、设备和程序产品与流程

本文的示例总体涉及计算机领域,特别地涉及界面交互的方法、装置、设备和程序产品。

背景技术:

1、在多模态问答场景中,用户常常需要基于图像内容向智能系统提出问题,并期望获得与图像中具体位置、局部细节或跨区域关系相关的回答。然而,当智能系统仅以文本形式呈现处理结果时,用户难以直观地判断处理结果与图像中特定区域之间的对应关系。

技术实现思路

1、在第一方面,提供了一种界面交互的方法。该方法包括:接收第一请求,第一请求用于指示智能系统执行第一任务,第一请求表征对至少一项媒体内容的标识;在至少一项媒体内容的关联位置处,呈现至少一项元素,至少一项元素表征智能系统对至少一项媒体内容的第一处理过程,第一处理过程对应于第一任务的第一阶段;以及输出第一信息,第一信息来自智能系统,第一信息包括第一任务的执行结果。

2、在第二方面,提供了一种用于界面交互的装置。该装置包括:接收模块,被配置为接收第一请求,第一请求用于指示智能系统执行第一任务,第一请求表征对至少一项媒体内容的标识;第一呈现模块,被配置为在至少一项媒体内容的关联位置处,呈现至少一项元素,至少一项元素表征智能系统对至少一项媒体内容的第一处理过程,第一处理过程对应于第一任务的第一阶段;以及输出模块,被配置为输出第一信息,第一信息来自智能系统,第一信息包括第一任务的执行结果。

3、在第三方面,提供了一种电子设备。该设备包括至少一个处理器;以及至少一个存储器,至少一个存储器被耦合到至少一个处理器并且存储用于由至少一个处理器执行的指令。指令在由至少一个处理器执行时使设备执行第一方面的方法。

4、在第四方面,提供了一种计算机程序产品,该计算机程序产品被有形地存储在计算机存储介质中并且包括计算机可执行指令,该计算机可执行指令在由设备执行时使设备执行第一方面的方法。

5、以此方式,通过在媒体内容的关联位置处呈现表征智能系统处理过程的元素,能够使用户直观地感知智能系统对媒体内容中各对象的定位、分析和推理过程,并据此复核智能系统输出的执行结果与媒体内容之间的对应关系,从而提升处理结果的可解释性和可信度。

6、应当理解,本内容部分中所描述的内容并非旨在限定本文中的示例的关键特征或重要特征,也不用于限制方案的范围。其它特征将通过以下的描述而变得容易理解。

1.一种界面交互的方法,包括:

2.根据权利要求1所述的方法,其中所述至少一项元素包括第一元素,所述第一元素用于标记第一对象,所述至少一项媒体内容包括所述第一对象。

3.根据权利要求2所述的方法,其中所述呈现所述至少一项元素包括:

4.根据权利要求2所述的方法,其中所述第一任务至少用于标识第一类型的对象,所述第一对象对应于所述第一类型。

5.根据权利要求4所述的方法,其中所述第一元素包括第一计数标识,所述第一计数标识与所述第一对象对应,并且所述第一阶段包括对第一组对象进行计数,所述第一组对象对应于所述第一类型,所述第一组对象包括所述第一对象。

6.根据权利要求2所述的方法,其中所述至少一项元素还包括第二元素,所述第二元素表征所述第一对象和第二对象的第一关系。

7.根据权利要求6所述的方法,其中所述第一阶段包括标识满足所述第一关系的对象,所述第一关系是基于所述第一请求得到的。

8.根据权利要求6所述的方法,其中所述至少一项媒体内容包括第一媒体内容和第二媒体内容,所述第一媒体内容包括所述第一对象,所述第二媒体内容包括所述第二对象。

9.根据权利要求2所述的方法,其中所述第一元素表征第一轨迹,所述第一轨迹是基于所述第一对象的分布所得到的。

10.根据权利要求9所述的方法,其中所述第一请求用于标识满足条件的至少一条轨迹,并且所述至少一项元素还包括第三元素,所述第三元素表征所述第一轨迹是否满足所述条件。

11.根据权利要求1所述的方法,其中所述至少一项元素展示第一部分的放大视图,所述放大视图表征所述第一阶段的中间处理结果,所述至少一项媒体内容包括所述第一部分。

12.根据权利要求1所述的方法,其中所述至少一项元素为第一组元素,所述方法还包括:

13. 根据权利要求12所述的方法,其中所述呈现第二组元素包括:

14.根据权利要求12所述的方法,其中所述第一阶段包括处理第一组媒体内容,所述第二阶段包括处理第二组媒体内容,所述至少一项媒体内容包括所述第一组媒体内容和所述第二组媒体内容,所述第一组媒体内容不同于所述第二组媒体内容。

15.根据权利要求1所述的方法,其中所述呈现至少一项元素包括:

16.根据权利要求15所述的方法,其中所述至少一项元素包括第二部分和第三部分,并且所述呈现动态过程包括:

17. 根据权利要求1所述的方法,其中所述至少一项元素包括第四元素,所述方法还包括:

18.一种用于界面交互的装置,包括:

19. 一种电子设备,包括:

20.一种计算机程序产品,所述计算机程序产品被有形地存储在计算机存储介质中并且包括计算机可执行指令,所述计算机可执行指令在由设备执行时使所述设备执行根据权利要求1至17中任一项所述的方法。