线上绘本内容的获取方法、装置以及智能屏设备与流程

技术特征：
1.一种线上绘本内容的获取方法，应用于智能屏设备，所述方法包括：建立所述智能屏设备与棱镜组件的通信链接；采用所述棱镜组件对线下绘本进行识别，得到所述线下绘本对应的图像内容；根据所述图像内容，获取视频形式的线上绘本内容。2.如权利要求1所述的线上绘本内容的获取方法，其中，所述根据所述图像内容，获取视频形式的线上绘本内容，包括：解析所述图像内容得到内容标签；从视频库中获取与所述内容标签对应的绘本视频，作为所述视频形式的线上绘本内容。3.如权利要求2所述的线上绘本内容的获取方法，其中，所述从视频库获取与所述内容标签对应的绘本视频，包括：从本地视频库获取与所述内容标签对应的绘本视频；和/或，从第三方视频库获取与所述内容标签对应的绘本视频。4.如权利要求2所述的线上绘本内容的获取方法，所述视频库包括：候选内容标签，以及与所述候选内容标签对应的候选绘本视频，其中，所述从视频库获取与所述内容标签对应的绘本视频，包括：直接获取所述视频库内，与所述内容标签匹配的候选内容标签对应的候选绘本视频。5.如权利要求2所述的线上绘本内容的获取方法，所述视频库包括：候选内容标签，以及与所述候选内容标签对应的多帧候选绘本图像，其中，所述从视频库获取与所述内容标签对应的绘本视频，包括：从视频库内，读取与所述内容标签所匹配候选内容标签的多帧候选绘本图像；根据所述多帧候选绘本图像，合成所述对应的绘本视频。6.如权利要求5所述的线上绘本内容的获取方法，各帧所述候选绘本图像对应一个时间戳，其中，所述根据所述多帧候选绘本图像，合成所述对应的绘本视频，包括：根据所述多帧候选绘本图像结合各帧候选绘本图像对应的时间戳，合成所述对应的绘本视频。7.如权利要求5所述的线上绘本内容的获取方法，各帧所述候选绘本图像对应一段文本内容，其中，所述根据所述多帧候选绘本图像，合成所述对应的绘本视频后，还包括：根据各帧候选绘本图像对应的文本内容，形成与所述绘本视频对应的音频，并将所形成的绘本视频与所述对应的音频相关联。8.如权利要求1-7任一项所述的线上绘本内容的获取方法，所述棱镜组件包括摄像组件和图像识别组件，其中，采用所述摄像组件，基于多模态的交互方式捕获所述线下绘本的绘本图像；采用所述图像识别组件，识别所述绘本图像的图像特征；以及，采用所述智能屏设备的处理器，解析所述图像特征得到所述图像内容。9.如权利要求1-7任一项所述的线上绘本内容的获取方法，其中，所述图像内容为所述线下绘本的封面图像内容。10.如权利要求1-7任一项所述的线上绘本内容的获取方法，其中，所述还包括：在教育类应用程序的主界面呈现所述视频形式的线上绘本内容。
11.一种线上绘本内容的获取装置，应用于智能屏设备，所述装置包括：建立模块，用于建立所述智能屏设备与棱镜组件的通信链接；识别模块，用于采用所述棱镜组件对线下绘本进行识别，得到所述线下绘本对应的图像内容；获取模块，用于根据所述图像内容，获取视频形式的线上绘本内容。12.如权利要求11所述的线上绘本内容的获取装置，其中，所述获取模块，还包括：解析单元，用于解析所述图像内容得到内容标签；获取单元，用于从视频库中获取与所述内容标签对应的绘本视频，作为所述视频形式的线上绘本内容。13.如权利要求12所述的线上绘本内容的获取装置，其中，所述获取单元，还用于：从本地视频库获取与所述内容标签对应的绘本视频；和/或，从第三方视频库获取与所述内容标签对应的绘本视频。14.如权利要求12所述的线上绘本内容的获取装置，所述视频库包括：候选内容标签，以及与所述候选内容标签对应的候选绘本视频，其中，所述获取单元，还用于：直接获取所述视频库内，与所述内容标签匹配的候选内容标签对应的候选绘本视频。15.如权利要求12所述的线上绘本内容的获取装置，所述视频库包括：候选内容标签，以及与所述候选内容标签对应的多帧候选绘本图像，其中，所述获取单元，还用于：从视频库内，读取与所述内容标签所匹配候选内容标签的多帧候选绘本图像；根据所述多帧候选绘本图像，合成所述对应的绘本视频。16.如权利要求15所述的线上绘本内容的获取装置，各帧所述候选绘本图像对应一个时间戳，其中，所述获取单元，还用于：根据所述多帧候选绘本图像结合各帧候选绘本图像对应的时间戳，合成所述对应的绘本视频。17.如权利要求15所述的线上绘本内容的获取装置，各帧所述候选绘本图像对应一段文本内容，其中，所述获取单元，还用于：根据各帧候选绘本图像对应的文本内容，形成与所述绘本视频对应的音频，并将所形成的绘本视频与所述对应的音频相关联。18.如权利要求11-17任一项所述的线上绘本内容的获取装置，所述棱镜组件包括摄像组件和图像识别组件，其中，采用所述摄像组件，基于多模态的交互方式捕获所述线下绘本的绘本图像；采用所述图像识别组件，识别所述绘本图像的图像特征；以及，采用所述智能屏设备的处理器，解析所述图像特征得到所述图像内容。19.如权利要求11-17任一项所述的线上绘本内容的获取装置，其中，所述图像内容为所述线下绘本的封面图像内容。20.如权利要求11-17任一项所述的线上绘本内容的获取装置，所述装置，还包括：显示模块，用于在教育类应用程序的主界面呈现所述视频形式的线上绘本内容。21.一种智能屏设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-10中任一项所述的线上绘本内容的获取方法。22.一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使所述计算机执行权利要求1-10中任一项所述的线上绘本内容的获取方法。

技术总结
本申请公开了一种线上绘本内容的获取方法，涉及线上教育技术领域。该线上绘本内容的获取方法，应用于智能屏设备，具体实现方案为：通过建立智能屏设备与棱镜组件的通信链接；采用棱镜组件对线下绘本进行识别，得到线下绘本对应的图像内容；以根据图像内容，获取视频形式的线上绘本内容。该方法通过与智能屏设备建立通信链接的棱镜组件识别得到线下绘本对应的图像内容，以根据图像内容，获取到视频形式的线上绘本内容，相较于现有技术中只能获取到音频形式的线上绘本内容，本申请实现了在智能屏设备中以视频的方式展现线上绘本内容，能够以更加生动、形象的方式将线下绘本内容提供给用户。用户。用户。


技术研发人员：戴晓澄 郎柳 王乐
受保护的技术使用者：上海小度技术有限公司
技术研发日：2020.05.13
技术公布日：2021/11/19