无障碍模式下的设备控制方法、控制方法及设备与流程

技术特征：
1.一种控制方法，其特征在于，包括：采集用户语音数据；识别所述用户语音数据中的控制指令；模拟执行生成所述控制指令用户所需执行的界面控制操作，以便基于所述界面控制操作实现对应的控制处理；输出控制处理结果的第一提示信息。2.根据权利要求1所述的方法，其特征在于，所述模拟用户执行所述控制指令对应的界面控制操作，以便基于所述界面控制操作实现对应的控制处理包括：查找应用节点树，确定所述控制指令所命中的至少一个节点及所述至少一个节点的层级关系；其中，所述应用节点树为由桌面、桌面索引的多个应用程序、所述应用程序提供的多个可操作元素分别作为节点、并根据节点之间的索引关系构建的树形结构；按照至少一个节点之间的层级关系，依次模拟执行所述至少一个节点分别对应的界面控制操作，以便基于所述界面控制操作实现对应的控制处理。3.根据权利要求2所述的方法，其特征在于，所述查找应用节点树，确定所述控制指令所命中的至少一个节点及所述至少一个节点的层级关系包括：确定所述控制指令包含的目标节点；查找应用节点树，从叶子节点开始向上查找，确定所述目标节点及所述目标节点关联的节点，作为所述控制指令所命中的至少一个节点；确定所述至少一个节点之间的层级关系；按照所述至少一个节点之间的层级关系，依次模拟执行所述至少一个节点分别对应的界面控制操作。4.根据权利要求2或3所述的方法，其特征在于，还包括：确定系统接入的多个应用程序及所述多个应用程序分别提供的多个可操作元素；将桌面、所述多个应用程序以及多个应用程序分别提供的多个可操作元素分别作为节点，并根据节点之间的索引关系构建生成所述应用节点树。5.根据权利要求1所述的方法，其特征在于，还包括：建立与音频采集设备的通信连接；所述采集用户语音数据包括：利用所述音频采集设备采集用户语音数据；其中，所述音频采集设备设置有按键，所述用户语音数据为所述音频采集设备检测到针对第一按键的第一触发操作时启动采集，并在检测到针对第二按键的第二触发操作时结束采集而获得。6.根据权利要求2所述的方法，其特征在于，所述按照所述至少一个节点之间的层级关系依次模拟执行所述至少一个节点分别对应的界面控制操作包括：按照所述至少一个节点之间的层级关系，针对当前待处理的节点，获取当前界面的页面节点树；根据所述页面节点树确定所述节点所在的页面位置，基于所述页面位置模拟执行对应的界面控制操作。7.一种无障碍模式下的设备控制方法，其特征在于，包括：启动所述无障碍模式；
采集用户语音数据；识别所述用户语音数据中的控制指令；模拟执行生成所述控制指令用户所需执行的界面控制操作，以便基于所述界面控制操作实现对应的控制处理；若控制处理结果为显示目标页面，确定所述目标页面中符合用户操作意图的焦点；在所述目标页面在用户界面中载入完成，聚焦至所述焦点；输出第二提示信息。8.根据权利要求7所述的方法，其特征在于，所述确定所述目标页面中符合用户操作意图的焦点包括：根据所述目标页面的历史操作数据和/或用户历史行为数据，确定所述目标页面中的目标节点。9.一种控制方法，其特征在于，包括：检测到针对第一按键的第一触发操作，启动语音采集；检测到针对第二按键的第二触发操作，结束语音采集，以获得用户语音数据；将所述用户语音数据发送至电子设备，以供所述电子设备识别所述用户语音数据中的控制指令；模拟执行生成所述控制指令用户所需执行的界面控制操作，以便于基于所述界面控制操作实现对应的控制处理；输出控制处理结果对应的第一提示信息。10.一种电子设备，其特征在于，包括存储组件、显示组件以及处理组件；所述存储组件存储一条或多条计算机程序指令；所述显示组件提供用户界面；所述一条或多条计算机程序指令以供所述处理组件调用并执行，以实现如权利要求1～6任一项所述的控制方法，或者实现如权利要求7或8所述的无障碍模式下的设备控制方法。11.一种音频采集设备，其特征在于，包括设备本体，内置于所述设备本体中的音频采集组件、通信组件及控制组件，以及嵌于所述设备本体表面的按键；所述控制组件利用所述通信组件建立与电子设备的通信连接；检测到针对第一按键的第一触发操作，触发所述音频采集组件启动语音采集，以及检测到针对第二按键的第二触发操作，触发所述音频采集组件结束语音采集，以获得所述音频采集组件采集得到的用户语音数据；并将所述用户语音数据利用所述通信组件发送至所述电子设备。12.根据权利要求11所述的音频采集设备，其特征在于，所述设备本体设置有容纳所述电子设备的容纳槽，或者所述设备本体为所述电子设备的组成配件，可拆卸安装于所述电子设备中；或者所述设备本体具有粘性部件，通过所述粘性部件粘贴与所述电子设备上。

技术总结
本申请实施例提供了一种无障碍模式下的设备控制方法、控制方法及设备。其中，采集用户语音数据；识别所述用户语音数据中的控制指令；模拟执行所述控制指令对应的界面控制操作，以便基于所述界面控制操作实现对应的控制处理；输出控制处理结果的第一提示信息。本申请实施例提供的技术方案提高了操作便利性，提高了信息输入效率。高了信息输入效率。高了信息输入效率。


技术研发人员：张建锋 张怡远 金雅博 黄刚
受保护的技术使用者：阿里巴巴（中国）有限公司
技术研发日：2021.07.14
技术公布日：2021/11/14