一种基于人工智能的多设备协同方法、装置及存储介质与流程

摘要: 本发明涉及计算机,具体涉及一种基于人工智能的多设备协同方法、装置及存储介质。背景技术:1、随着教育信息化和智能办公的深入,以交互平板为代表的智能终端设备已广泛应...
一种基于人工智能的多设备协同方法、装置及存储介质与流程

本发明涉及计算机,具体涉及一种基于人工智能的多设备协同方法、装置及存储介质。

背景技术:

1、随着教育信息化和智能办公的深入,以交互平板为代表的智能终端设备已广泛应用于课堂教学、商务会议等协作场景。在这些场景中,通常存在一个主讲人使用的设备(如教师用交互平板)和多个参与者使用的设备(如学生用平板),形成了多设备并存的应用环境。

2、在传统的应用模式下,这些设备往往是作为独立的信息孤岛运行。例如,在教学场景中,教师在主交互平板上进行内容讲解,而学生端的设备或者无法与教师端内容同步,或者只能进行简单的屏幕镜像投射。这种方式缺乏对教学内容的深度理解和场景感知,导致设备间的协同能力低下。当教师的教学活动从ppt讲解切换到习题作答时,需要手动进行一系列复杂操作来切换学生端设备显示的内容,操作繁琐,中断了教学节奏。

3、为了解决上述问题,一些方案尝试提供分屏或多屏显示功能,但这些方案通常是静态的或需要用户手动触发。用户需要预先设定分屏布局或在不同模式间手动切换,这并未从根本上解决设备对应用场景上下文无感知的问题。此外,这些通用解决方案很少考虑交互平板等嵌入式设备在算力、功耗和内存方面的资源限制,直接部署复杂的协同逻辑往往会导致系统卡顿、响应延迟,用户体验不佳。

4、因此,现有技术迫切需要一种能够自动感知主设备上的内容上下文、智能地协调多个设备进行协同工作、并能适应嵌入式平台资源限制的创新技术方案,以提升多设备环境下的协作效率和用户体验。

技术实现思路

1、为了解决上述现有技术中存在的多设备间缺乏上下文感知与智能协同,导致用户体验不佳、操作效率低下的技术问题,本发明提供了一种基于人工智能的多设备协同方法、装置及存储介质。

2、本发明提供的一种基于人工智能的多设备协同方法,包括:在第一设备上,获取与所述第一设备上当前显示内容相关联的内容上下文信息;基于所述内容上下文信息,确定与所述内容上下文信息对应的设备间协同策略,并控制所述第一设备与至少一个第二设备执行所述设备间协同策略;获取在执行所述设备间协同策略期间,于所述至少一个第二设备上产生的交互数据;基于所述交互数据,更新与所述内容上下文信息对应的设备间协同策略。

3、在一种实施方式中,所述获取与所述第一设备上当前显示内容相关联的内容上下文信息,包括:采用经训练的机器学习模型,对所述第一设备的屏幕图像或应用数据进行分析,以识别出所述内容上下文信息所属的预设类别;所述预设类别包括:ppt讲解、板书、视频播放、练习题中的至少一种。

4、在一种实施方式中,所述机器学习模型为经过整型量化处理的模型,并且所述分析步骤通过调用所述第一设备的嵌入式片上系统中的神经网络处理单元来执行。

5、在一种实施方式中,当所述内容上下文信息为ppt讲解时,所述设备间协同策略包括:控制所述至少一个第二设备同步显示所述第一设备正在显示的当前ppt页面,并附加显示下一页ppt的预览。

6、在一种实施方式中,当所述内容上下文信息为练习题时,所述设备间协同策略包括:控制所述至少一个第二设备显示题目内容,并控制所述第一设备聚合显示来自一个或多个第二设备的答案提交情况或统计结果。

7、在一种实施方式中,所述交互数据包括:所述至少一个第二设备上的用户答题数据、批注数据、页面停留时长中的至少一种。

8、在一种实施方式中,所述第一设备包括用于获取内容上下文信息的处理单元和用于执行协同策略的处理单元;并且所述方法进一步包括:利用直接存储器存取技术,在所述用于获取内容上下文信息的处理单元与所述用于执行协同策略的处理单元之间,实现屏幕数据或应用数据的零拷贝传输。

9、在一种实施方式中,所述第一设备为教师用交互平板,所述至少一个第二设备为学生用交互平板或学生用个人计算设备。

10、本发明还提供了一种基于人工智能的多设备协同装置,包括:内容上下文获取模块,被配置为在第一设备上,获取与所述第一设备上当前显示内容相关联的内容上下文信息;协同策略执行模块,被配置为基于所述内容上下文信息,确定与所述内容上下文信息对应的设备间协同策略,并控制所述第一设备与至少一个第二设备执行所述设备间协同策略;策略优化模块,被配置为获取在执行所述设备间协同策略期间,于所述至少一个第二设备上产生的交互数据;并基于所述交互数据,更新与所述内容上下文信息对应的设备间协同策略。

11、本发明还提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时,实现如前述任一项所述的方法。

12、与现有技术相比,本发明的有益效果在于:首先,通过构建内容感知、策略执行、反馈优化的闭环协同机制,本发明实现了多设备间真正意义上的智能协同,而非简单的手动分屏或静态投屏。这使得设备能够主动适应用户当前的任务场景,显著提升了人机交互的流畅度和智能化水平。其次,由于能够自动识别内容上下文并触发相应的设备间协同策略,本发明大幅减少了用户在设备间切换、内容分发等任务上的手动操作,使其能更专注于核心任务,从而降低了操作负荷,提升了工作效率。同时,第二设备的用户也能获得更具针对性和连贯性的内容体验,提高了信息接收的效率和准确性。最后,通过采用模型量化、神经网络处理单元加速、直接存储器存取零拷贝传输等端侧优化技术,本发明在实现复杂人工智能功能的同时,有效控制了计算和存储资源的开销,保证了在交互平板等嵌入式设备上的低延迟、低功耗运行,满足了实时交互的严苛要求。

1.一种基于人工智能的多设备协同方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述获取与所述第一设备上当前显示内容相关联的内容上下文信息,包括:

3.根据权利要求2所述的方法,其特征在于,所述机器学习模型为经过整型量化处理的模型,并且所述分析步骤通过调用所述第一设备的嵌入式片上系统中的神经网络处理单元来执行。

4.根据权利要求1所述的方法,其特征在于,当所述内容上下文信息为ppt讲解时,所述设备间协同策略包括:

5.根据权利要求1所述的方法,其特征在于,当所述内容上下文信息为练习题时,所述设备间协同策略包括:

6.根据权利要求1所述的方法,其特征在于,所述交互数据包括:所述至少一个第二设备上的用户答题数据、批注数据、页面停留时长中的至少一种。

7.根据权利要求1所述的方法,其特征在于,所述第一设备包括用于获取内容上下文信息的处理单元和用于执行协同策略的处理单元;并且所述方法进一步包括:

8.根据权利要求1所述的方法,其特征在于,所述第一设备为教师用交互平板,所述至少一个第二设备为学生用交互平板或学生用个人计算设备。

9.一种基于人工智能的多设备协同装置,其特征在于,包括:

10.一种计算机可读存储介质,其特征在于,其上存储有计算机程序,所述计算机程序被处理器执行时,实现如权利要求1所述的方法。