一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

一种语义槽提取方法及显示设备与流程

2022-03-09 00:02:54 来源:中国专利 TAG:


1.本技术涉及语义槽领域,尤其涉及一种语义槽提取方法及显示设备。


背景技术:

2.随着人工智能的快速发展,语音交互成为智能产品的标志。语义理解,即语义槽提取是语音交互的基础。通常将语义槽作为搜索的关键词,可以搜索到用户希望观看的内容。但是当前基于语音识别的语义理解不准确的主要问题在于三点,第一个是由于用户表述错误或语音识别问题导致语义理解获取的文本存在错误的情况,这就给语义理解带来一定困难,示例性的,用户通过语音进行请求查询时,由于对期望检索的影视名称记错、无法准确记清楚,或由于方言、语音识识别噪音等原因,导致识别的文本与用户期望之间存在差异;第二个是语言表达本身的多样性,也同样给语义理解带来困难;第三个是由于当前互联网的快速发展,各种新视频名称、音乐名称的出现给当前基于词库的语义理解带来了挑战。
3.所以,如何准确的提取语义槽,提高语义理解的准确率成为本领域技术人员亟待解决的问题。


技术实现要素:

4.本技术实施例提供一种语义槽提取方法及显示设备,提高提取语义槽的准确性。
5.第一方面,提供一种显示设备,包括:
6.显示器;
7.控制器,用于执行:响应于用户发送的请求,对所述请求进行深度学习的语义槽位解析,确定第一语义槽;
8.检测所述请求的第一语义槽是否出现错误,如果出现错误,则对所述请求中与第一语义槽对应的内容进行修改,得到修改后的请求;
9.对修改后的请求进行文法语义槽位解析,确定第二语义槽;
10.将所述第一语义槽和第二语义槽结合,得到所述请求的语义槽。
11.一些实施例中,所述控制器,还用于执行:
12.如果未出现错误,则直接对所述请求进行文法语义槽位解析,确定第三语义槽;
13.将所述第一语义槽和第三语义槽结合,得到所述请求的语义槽。
14.一些实施例中,所述对请求中与第一语义槽对应的内容进行修改,得到修改后的请求的步骤包括:
15.查找与所述第一语义槽对应的替换内容;
16.利用所述替换内容,替换所述请求中与所述第一语义槽对应的内容,形成待确定请求;
17.如果所述待确定请求的数量为一个,则确定所述待确定请求为修改后的请求;
18.一些实施例中,所述对请求中与第一语义槽对应的内容进行修改,得到修改后的请求的步骤还包括:
19.如果所述待确定请求的数量大于一个,则从多个待确定请求中,筛选出一个最优的待确定请求,作为修改后的请求。
20.一些实施例中,所述查找与所述第一语义槽对应的替换内容的步骤包括:
21.确定所述请求的业务领域;
22.根据所述业务领域,利用拼音索引、字形索引、音形码索引和语义索引,确定与第一语义槽对应的替换内容。
23.第二方面,提供一种语义槽提取方法,包括:
24.响应于用户发送的请求,对所述请求进行深度学习的语义槽位解析,确定第一语义槽;
25.检测所述请求的第一语义槽是否出现错误,如果出现错误,则对所述请求中与第一语义槽对应的内容进行修改,得到修改后的请求;
26.对修改后的请求进行文法语义槽位解析,确定第二语义槽;
27.将所述第一语义槽和第二语义槽结合,得到所述请求的语义槽。
28.一些实施例中,所述方法还包括:
29.如果未出现错误,则直接对所述请求进行文法语义槽位解析,确定第三语义槽;将所述第一语义槽和第三语义槽结合,得到所述请求的语义槽。
30.一些实施例中,所述对请求中与第一语义槽对应的内容进行修改,得到修改后的请求的步骤包括:
31.查找与所述第一语义槽对应的替换内容;
32.利用所述替换内容,替换所述请求中与所述第一语义槽对应的内容,形成待确定请求;
33.如果所述待确定请求的数量为一个,则确定所述待确定请求为修改后的请求。
34.一些实施例中,所述对请求中与第一语义槽对应的内容进行修改,得到修改后的请求的步骤还包括:
35.如果所述待确定请求的数量大于一个,则从多个待确定请求中,筛选出一个最优的待确定请求,作为修改后的请求。
36.一些实施例中,所述查找与所述第一语义槽对应的替换内容的步骤包括:
37.确定所述请求的业务领域;
38.根据所述业务领域,利用拼音索引、字形索引、音形码索引和语义索引,确定与第一语义槽对应的替换内容。
39.在上述实施例中,一种语义槽提取方法及显示设备,提高提取语义槽的准确性。该方法包括:响应于用户发送的请求,对所述请求进行深度学习的语义槽位解析,确定第一语义槽;检测所述请求的第一语义槽是否出现错误,如果出现错误,则对所述请求中与第一语义槽对应的内容进行修改,得到修改后的请求;对修改后的请求进行文法语义槽位解析,确定第二语义槽;将所述第一语义槽和第二语义槽结合,得到所述请求的语义槽。
附图说明
40.图1中示例性示出了根据一些实施例的显示设备与控制装置之间操作场景的示意图;
41.图2中示例性示出了根据一些实施例的显示设备200的硬件配置框图;
42.图3中示例性示出了根据一些实施例的控制设备100的硬件配置框图;
43.图4中示例性示出了根据一些实施例的显示设备200中软件配置示意图;
44.图5中示例性示出了根据一些实施例的显示设备200中应用程序的图标控件界面显示示意图;
45.图6中示例性示出了一种语义槽提取方法的流程图;
46.图7中示例性示出了深度学习的语义槽位解析的原理图;
47.图8中示例性示出了另一种语义槽提取方法的流程图。
具体实施方式
48.为使本技术的目的、实施方式和优点更加清楚,下面将结合本技术示例性实施例中的附图,对本技术示例性实施方式进行清楚、完整地描述,显然,所描述的示例性实施例仅是本技术一部分实施例,而不是全部的实施例。
49.基于本技术描述的示例性实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本技术所附权利要求保护的范围。此外,虽然本技术中公开内容按照示范性一个或几个实例来介绍,但应理解,可以就这些公开内容的各个方面也可以单独构成一个完整实施方式。
50.需要说明的是,本技术中对于术语的简要说明,仅是为了方便理解接下来描述的实施方式,而不是意图限定本技术的实施方式。除非另有说明,这些术语应当按照其普通和通常的含义理解。
51.本技术中说明书和权利要求书及上述附图中的术语

第一



第二



第三

等是用于区别类似或同类的对象或实体,而不必然意味着限定特定的顺序或先后次序,除非另外注明(unless otherwise indicated)。应该理解这样使用的用语在适当情况下可以互换,例如能够根据本技术实施例图示或描述中给出那些以外的顺序实施。
52.此外,术语

包括



具有

以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的那些组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
53.本技术中使用的术语

模块

,是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
54.本技术中使用的术语

遥控器

,是指电子设备(如本技术中公开的显示设备)的一个组件,通常可在较短的距离范围内无线控制电子设备。一般使用红外线和/或射频(rf)信号和/或蓝牙与电子设备连接,也可以包括wifi、无线usb、蓝牙、动作传感器等功能模块。例如:手持式触摸遥控器,是以触摸屏中用户界面取代一般遥控装置中的大部分物理内置硬键。
55.本技术中使用的术语

手势

,是指用户通过一种手型的变化或手部运动等动作,用于表达预期想法、动作、目的/或结果的用户行为。
56.图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图。如图1中示出,用户可通过移动终端300和控制装置100操作显示设备200。
57.在一些实施例中,控制装置100可以是遥控器,遥控器和显示设备的通信包括红外
协议通信或蓝牙协议通信,及其他短距离通信方式等,通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器上按键,语音输入、控制面板输入等输入用户指令,来控制显示设备200。如:用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制显示设备200的功能。
58.在一些实施例中,也可以使用移动终端、平板电脑、计算机、笔记本电脑、和其他智能设备以控制显示设备200。例如,使用在智能设备上运行的应用程序控制显示设备200。该应用程序通过配置可以在与智能设备关联的屏幕上,在直观的用户界面(ui)中为用户提供各种控制。
59.在一些实施例中,移动终端300可与显示设备200安装软件应用,通过网络通信协议实现连接通信,实现一对一控制操作的和数据通信的目的。如:可以实现用移动终端300与显示设备200建立控制指令协议,将遥控控制键盘同步到移动终端300上,通过控制移动终端300上用户界面,实现控制显示设备200的功能。也可以将移动终端300上显示音视频内容传输到显示设备200上,实现同步显示功能。
60.如图1中还示出,显示设备200还与服务器400通过多种通信方式进行数据通信。可允许显示设备200通过局域网(lan)、无线局域网(wlan)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。示例的,显示设备200通过发送和接收信息,以及电子节目指南(epg)互动,接收软件程序更新,或访问远程储存的数字媒体库。服务器400可以是一个集群,也可以是多个集群,可以包括一类或多类服务器。通过服务器400提供视频点播和广告服务等其他网络服务内容。
61.显示设备200,可以液晶显示器、oled显示器、投影显示设备。具体显示设备类型,尺寸大小和分辨率等不作限定,本领技术人员可以理解的是,显示设备200可以根据需要做性能和配置上一些改变。
62.显示设备200除了提供广播接收电视功能之外,还可以附加提供计算机支持功能的智能网络电视功能,包括但不限于,网络电视、智能电视、互联网协议电视(iptv)等。
63.图2中示例性示出了根据示例性实施例中显示设备200的硬件配置框图。
64.在一些实施例中,显示设备200中包括控制器250、调谐解调器210、通信器220、检测器230、输入/输出接口255、显示器275,音频输出接口285、存储器260、供电电源290、用户接口265、外部装置接口240中的至少一种。
65.在一些实施例中,显示器275,用于接收源自第一处理器输出的图像信号,进行显示视频内容和图像以及菜单操控界面的组件。
66.在一些实施例中,显示器275,包括用于呈现画面的显示屏组件,以及驱动图像显示的驱动组件。
67.在一些实施例中,显示视频内容,可以来自广播电视内容,也可以是说,可通过有线或无线通信协议接收的各种广播信号。或者,可显示来自网络通信协议接收来自网络服务器端发送的各种图像内容。
68.在一些实施例中,显示器275用于呈现显示设备200中产生且用于控制显示设备200的用户操控ui界面。
69.在一些实施例中,根据显示器275类型不同,还包括用于驱动显示的驱动组件。
70.在一些实施例中,显示器275为一种投影显示器,还可以包括一种投影装置和投影屏幕。
71.在一些实施例中,通信器220是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器可以包括wifi芯片,蓝牙通信协议芯片,有线以太网通信协议芯片等其他网络通信协议芯片或近场通信协议芯片,以及红外接收器中的至少一种。
72.在一些实施例中,显示设备200可以通过通信器220与外部控制设备100或内容提供设备之间建立控制信号和数据信号发送和接收。
73.在一些实施例中,用户接口265,可用于接收控制装置100(如:红外遥控器等)红外控制信号。
74.在一些实施例中,检测器230是显示设备200用于采集外部环境或与外部交互的信号。
75.在一些实施例中,检测器230包括光接收器,用于采集环境光线强度的传感器,可以通过采集环境光可以自适应性显示参数变化等。
76.在一些实施例中,检测器230还可以包括图像采集器,如相机、摄像头等,可以用于采集外部环境场景,以及用于采集用户的属性或与用户交互手势,可以自适应变化显示参数,也可以识别用户手势,以实现与用户之间互动的功能。
77.在一些实施例中,检测器230还可以包括温度传感器等,如通过感测环境温度。
78.在一些实施例中,显示设备200可自适应调整图像的显示色温。如当温度偏高的环境时,可调整显示设备200显示图像色温偏冷色调,或当温度偏低的环境时,可以调整显示设备200显示图像偏暖色调。
79.在一些实施例中,检测器230还可声音采集器等,如麦克风,可以用于接收用户的声音。示例性的,包括用户控制显示设备200的控制指令的语音信号,或采集环境声音,用于识别环境场景类型,使得显示设备200可以自适应适应环境噪声。
80.在一些实施例中,如图2所示,输入/输出接口255被配置为,可进行控制器250与外部其他设备或其他控制器250之间的数据传输。如接收外部设备的视频信号数据和音频信号数据、或命令指令数据等。
81.在一些实施例中,外部装置接口240可以包括,但不限于如下:可以高清多媒体接口hdmi接口、模拟或数据高清分量输入接口、复合视频输入接口、usb输入接口、rgb端口等任一个或多个接口。也可以是上述多个接口形成复合性的输入/输出接口。
82.在一些实施例中,如图2所示,调谐解调器210被配置为,通过有线或无线接收方式接收广播电视信号,可以进行放大、混频和谐振等调制解调处理,从多多个无线或有线广播电视信号中解调出音视频信号,该音视频信号可以包括用户所选择电视频道频率中所携带的电视音视频信号,以及epg数据信号。
83.在一些实施例中,调谐解调器210解调的频点受到控制器250的控制,控制器250可根据用户选择发出控制信号,以使的调制解调器响应用户选择的电视信号频率以及调制解调该频率所携带的电视信号。
84.在一些实施例中,广播电视信号可根据电视信号广播制式不同区分为地面广播信号、有线广播信号、卫星广播信号或互联网广播信号等。或者根据调制类型不同可以区分为
数字调制信号,模拟调制信号等。或者根据信号种类不同区分为数字信号、模拟信号等。
85.在一些实施例中,控制器250和调谐解调器210可以位于不同的分体设备中,即调谐解调器210也可在控制器250所在的主体设备的外置设备中,如外置机顶盒等。这样,机顶盒将接收到的广播电视信号调制解调后的电视音视频信号输出给主体设备,主体设备经过第一输入/输出接口接收音视频信号。
86.在一些实施例中,控制器250,通过存储在存储器上中各种软件控制程序,来控制显示设备的工作和响应用户的操作。控制器250可以控制显示设备200的整体操作。例如:响应于接收到用于选择在显示器275上显示ui对象的用户命令,控制器250便可以执行与由用户命令选择的对象有关的操作。
87.在一些实施例中,所述对象可以是可选对象中的任何一个,例如超链接或图标。与所选择的对象有关操作,例如:显示连接到超链接页面、文档、图像等操作,或者执行与所述图标相对应程序的操作。用于选择ui对象用户命令,可以是通过连接到显示设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
88.如图2所示,控制器250包括随机存取存储器251(random access memory,ram)、只读存储器252(read-only memory,rom)、视频处理器270、音频处理器280、其他处理器253(例如:图形处理器(graphics processing unit,gpu)、中央处理器254(central processing unit,cpu)、通信接口(communication interface),以及通信总线256(bus)中的至少一种。其中,通信总线连接各个部件。
89.在一些实施例中,ram 251用于存储操作系统或其他正在运行中的程序的临时数据
90.在一些实施例中,rom 252用于存储各种系统启动的指令。
91.在一些实施例中,rom 252用于存储一个基本输入输出系统,称为基本输入输出系统(basic input output system,bios)。用于完成对系统的加电自检、系统中各功能模块的初始化、系统的基本输入/输出的驱动程序及引导操作系统。
92.在一些实施例中,在收到开机信号时显示设备200电源开始启动,cpu运行rom252中系统启动指令,将存储在存储器的操作系统的临时数据拷贝至ram 251中,以便于启动或运行操作系统。当操作系统启动完成后,cpu再将存储器中各种应用程序的临时数据拷贝至ram 251中,然后,以便于启动或运行各种应用程序。
93.在一些实施例中,cpu处理器254,用于执行存储在存储器中操作系统和应用程序指令。以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
94.在一些示例性实施例中,cpu处理器254,可以包括多个处理器。多个处理器可包括一个主处理器以及一个或多个子处理器。主处理器,用于在预加电模式中执行显示设备200一些操作,和/或在正常模式下显示画面的操作。一个或多个子处理器,用于在待机模式等状态下一种操作。
95.在一些实施例中,图形处理器253,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,对基于运算器得到的各种对象,进行渲染,上述
渲染后的对象用于显示在显示器上。
96.在一些实施例中,视频处理器270被配置为将接收外部视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等等视频处理,可得到直接可显示设备200上显示或播放的信号。
97.在一些实施例中,视频处理器270,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。
98.其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入mpeg-2,则解复用模块进行解复用成视频信号和音频信号等。
99.视频解码模块,则用于对解复用后的视频信号进行处理,包括解码和缩放处理等。
100.图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的gui信号,与缩放处理后视频图像进行叠加混合处理,以生成可供显示的图像信号。
101.帧率转换模块,用于对转换输入视频帧率,如将60hz帧率转换为120hz帧率或240hz帧率,通常的格式采用如插帧方式实现。
102.显示格式化模块,则用于将接收帧率转换后视频输出信号,改变信号以符合显示格式的信号,如输出rgb数据信号。
103.在一些实施例中,图形处理器253可以和视频处理器可以集成设置,也可以分开设置,集成设置的时候可以执行输出给显示器的图形信号的处理,分离设置的时候可以分别执行不同的功能,例如gpu frc(frame rate conversion))架构。
104.在一些实施例中,音频处理器280,用于接收外部的音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换、和放大处理等处理,得到可以在扬声器中播放的声音信号。
105.在一些实施例中,视频处理器270可以包括一颗或多颗芯片组成。音频处理器,也可以包括一颗或多颗芯片组成。
106.在一些实施例中,视频处理器270和音频处理器280,可以单独的芯片,也可以于控制器一起集成在一颗或多颗芯片中。
107.在一些实施例中,音频输出,在控制器250的控制下接收音频处理器280输出的声音信号,如:扬声器286,以及除了显示设备200自身携带的扬声器之外,可以输出至外接设备的发生装置的外接音响输出端子,如:外接音响接口或耳机接口等,还可以包括通信接口中的近距离通信模块,例如:用于进行蓝牙扬声器声音输出的蓝牙模块。
108.供电电源290,在控制器250控制下,将外部电源输入的电力为显示设备200提供电源供电支持。供电电源290可以包括安装显示设备200内部的内置电源电路,也可以是安装在显示设备200外部电源,在显示设备200中提供外接电源的电源接口。
109.用户接口265,用于接收用户的输入信号,然后,将接收用户输入信号发送给控制器250。用户输入信号可以是通过红外接收器接收的遥控器信号,可以通过网络通信模块接收各种用户控制信号。
110.在一些实施例中,用户通过控制装置100或移动终端300输入用户命令,用户输入接口则根据用户的输入,显示设备200则通过控制器250响应用户的输入。
111.在一些实施例中,用户可在显示器275上显示的图形用户界面(gui)输入用户命令,则用户输入接口通过图形用户界面(gui)接收用户输入命令。或者,用户可通过输入特
定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
112.在一些实施例中,

用户界面

,是应用程序或操作系统与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(graphic user interface,gui),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、widget等可视的界面元素。
113.存储器260,包括存储用于驱动显示设备200的各种软件模块。如:第一存储器中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等中的至少一种。
114.基础模块用于显示设备200中各个硬件之间信号通信、并向上层模块发送处理和控制信号的底层软件模块。检测模块用于从各种传感器或用户输入接口中收集各种信息,并进行数模转换以及分析管理的管理模块。
115.例如,语音识别模块中包括语音解析模块和语音指令数据库模块。显示控制模块用于控制显示器进行显示图像内容的模块,可以用于播放多媒体图像内容和ui界面等信息。通信模块,用于与外部设备之间进行控制和数据通信的模块。浏览器模块,用于执行浏览服务器之间数据通信的模块。服务模块,用于提供各种服务以及各类应用程序在内的模块。同时,存储器260还用存储接收外部数据和用户数据、各种用户界面中各个项目的图像以及焦点对象的视觉效果图等。
116.图3示例性示出了根据示例性实施例中控制设备100的配置框图。如图3所示,控制设备100包括控制器110、通信接口130、用户输入/输出接口、存储器、供电电源。
117.控制设备100被配置为控制显示设备200,以及可接收用户的输入操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起用用户与显示设备200之间交互中介作用。如:用户通过操作控制设备100上频道加减键,显示设备200响应频道加减的操作。
118.在一些实施例中,控制设备100可是一种智能设备。如:控制设备100可根据用户需求安装控制显示设备200的各种应用。
119.在一些实施例中,如图1所示,移动终端300或其他智能电子设备,可在安装操控显示设备200的应用之后,可以起到控制设备100类似功能。如:用户可以通过安装应用,在移动终端300或其他智能电子设备上可提供的图形用户界面的各种功能键或虚拟按钮,以实现控制设备100实体按键的功能。
120.控制器110包括处理器112和ram 113和rom 114、通信接口130以及通信总线。控制器用于控制控制设备100的运行和操作,以及内部各部件之间通信协作以及外部和内部的数据处理功能。
121.通信接口130在控制器110的控制下,实现与显示设备200之间控制信号和数据信号的通信。如:将接收到的用户输入信号发送至显示设备200上。通信接口130可包括wifi芯片131、蓝牙模块132、nfc模块133等其他近场通信模块中至少之一种。
122.用户输入/输出接口140,其中,输入接口包括麦克风141、触摸板142、传感器143、按键144等其他输入接口中至少一者。如:用户可以通过语音、触摸、手势、按压等动作实现
用户指令输入功能,输入接口通过将接收的模拟信号转换为数字信号,以及数字信号转换为相应指令信号,发送至显示设备200。
123.输出接口包括将接收的用户指令发送至显示设备200的接口。在一些实施例中,可以红外接口,也可以是射频接口。如:红外信号接口时,需要将用户输入指令按照红外控制协议转化为红外控制信号,经红外发送模块进行发送至显示设备200。再如:射频信号接口时,需将用户输入指令转化为数字信号,然后按照射频控制信号调制协议进行调制后,由射频发送端子发送至显示设备200。
124.在一些实施例中,控制设备100包括通信接口130和输入输出接口140中至少一者。控制设备100中配置通信接口130,如:wifi、蓝牙、nfc等模块,可将用户输入指令通过wifi协议、或蓝牙协议、或nfc协议编码,发送至显示设备200.
125.存储器190,用于在控制器的控制下存储驱动和控制控制设备200的各种运行程序、数据和应用。存储器190,可以存储用户输入的各类控制信号指令。
126.供电电源180,用于在控制器的控制下为控制设备100各元件提供运行电力支持。可以电池及相关控制电路。
127.在一些实施例中,系统可以包括内核(kernel)、命令解析器(shell)、文件系统和应用程序。内核、shell和文件系统一起组成了基本的操作系统结构,它们让用户可以管理文件、运行程序并使用系统。上电后,内核启动,激活内核空间,抽象硬件、初始化硬件参数等,运行并维护虚拟内存、调度器、信号及进程间通信(ipc)。内核启动后,再加载shell和用户应用程序。应用程序在启动后被编译成机器码,形成一个进程。
128.参见图4,在一些实施例中,将系统分为四层,从上至下分别为应用程序(applications)层(简称

应用层

),应用程序框架(application framework)层(简称

框架层

),安卓运行时(android runtime)和系统库层(简称

系统运行库层

),以及内核层。
129.在一些实施例中,应用程序层中运行有至少一个应用程序,这些应用程序可以是操作系统自带的窗口(window)程序、系统设置程序、时钟程序、相机应用等;也可以是第三方开发者所开发的应用程序,比如嗨见程序、k歌程序、魔镜程序等。在具体实施时,应用程序层中的应用程序包不限于以上举例,实际还可以包括其它应用程序包,本技术实施例对此不做限制。
130.框架层为应用程序层的应用程序提供应用编程接口(application programming interface,api)和编程框架。应用程序框架层包括一些预先定义的函数。应用程序框架层相当于一个处理中心,这个中心决定让应用层中的应用程序做出动作。应用程序通过api接口,可在执行中访问系统中的资源和取得系统的服务
131.如图4所示,本技术实施例中应用程序框架层包括管理器(managers),内容提供者(content provider)等,其中管理器包括以下模块中的至少一个:活动管理器(activity manager)用与和系统中正在运行的所有活动进行交互;位置管理器(location manager)用于给系统服务或应用提供了系统位置服务的访问;文件包管理器(package manager)用于检索当前安装在设备上的应用程序包相关的各种信息;通知管理器(notification manager)用于控制通知消息的显示和清除;窗口管理器(window manager)用于管理用户界面上的括图标、窗口、工具栏、壁纸和桌面部件。
132.在一些实施例中,活动管理器用于:管理各个应用程序的生命周期以及通常的导
航回退功能,比如控制应用程序的退出(包括将显示窗口中当前显示的用户界面切换到系统桌面)、打开、后退(包括将显示窗口中当前显示的用户界面切换到当前显示的用户界面的上一级用户界面)等。
133.在一些实施例中,窗口管理器用于管理所有的窗口程序,比如获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕,控制显示窗口变化(例如将显示窗口缩小显示、抖动显示、扭曲变形显示等)等。
134.在一些实施例中,系统运行库层为上层即框架层提供支撑,当框架层被使用时,安卓操作系统会运行系统运行库层中包含的c/c 库以实现框架层要实现的功能。
135.在一些实施例中,内核层是硬件和软件之间的层。如图4所示,内核层至少包含以下驱动中的至少一种:音频驱动、显示驱动、蓝牙驱动、摄像头驱动、wifi驱动、usb驱动、hdmi驱动、传感器驱动(如指纹传感器,温度传感器,触摸传感器、压力传感器等)等。
136.在一些实施例中,内核层还包括用于进行电源管理的电源驱动模块。
137.在一些实施例中,图4中的软件架构对应的软件程序和/或模块存储在图2或图3所示的第一存储器或第二存储器中。
138.在一些实施例中,以魔镜应用(拍照应用)为例,当遥控接收装置接收到遥控器输入操作,相应的硬件中断被发给内核层。内核层将输入操作加工成原始输入事件(包括输入操作的值,输入操作的时间戳等信息)。原始输入事件被存储在内核层。应用程序框架层从内核层获取原始输入事件,根据焦点当前的位置识别该输入事件所对应的控件以及以该输入操作是确认操作,该确认操作所对应的控件为魔镜应用图标的控件,魔镜应用调用应用框架层的接口,启动魔镜应用,进而通过调用内核层启动摄像头驱动,实现通过摄像头捕获静态图像或视频。
139.在一些实施例中,对于具备触控功能的显示设备,以分屏操作为例,显示设备接收用户作用于显示屏上的输入操作(如分屏操作),内核层可以根据输入操作产生相应的输入事件,并向应用程序框架层上报该事件。由应用程序框架层的活动管理器设置与该输入操作对应的窗口模式(如多窗口模式)以及窗口位置和大小等。应用程序框架层的窗口管理根据活动管理器的设置绘制窗口,然后将绘制的窗口数据发送给内核层的显示驱动,由显示驱动在显示屏的不同显示区域显示与之对应的应用界面。
140.在一些实施例中,如图5中所示,应用程序层包含至少一个应用程序可以在显示器中显示对应的图标控件,如:直播电视应用程序图标控件、视频点播应用程序图标控件、媒体中心应用程序图标控件、应用程序中心图标控件、游戏应用图标控件等。
141.在一些实施例中,直播电视应用程序,可以通过不同的信号源提供直播电视。例如,直播电视应用程可以使用来自有线电视、无线广播、卫星服务或其他类型的直播电视服务的输入提供电视信号。以及,直播电视应用程序可在显示设备200上显示直播电视信号的视频。
142.在一些实施例中,视频点播应用程序,可以提供来自不同存储源的视频。不同于直播电视应用程序,视频点播提供来自某些存储源的视频显示。例如,视频点播可以来自云存储的服务器端、来自包含已存视频节目的本地硬盘储存器。
143.在一些实施例中,媒体中心应用程序,可以提供各种多媒体内容播放的应用程序。例如,媒体中心,可以为不同于直播电视或视频点播,用户可通过媒体中心应用程序访问各
种图像或音频所提供服务。
144.在一些实施例中,应用程序中心,可以提供储存各种应用程序。应用程序可以是一种游戏、应用程序,或某些和计算机系统或其他设备相关但可以在智能电视中运行的其他应用程序。应用程序中心可从不同来源获得这些应用程序,将它们储存在本地储存器中,然后在显示设备200上可运行。
145.随着人工智能的快速发展,语音交互成为智能产品的标志。语义理解,即语义槽提取是语音交互的基础。通常将语义槽作为搜索的关键词,可以搜索到用户希望观看的内容。但是当前基于语音识别的语义理解不准确的主要问题在于三点,第一个是由于用户表述错误或语音识别问题导致语义理解获取的文本存在错误的情况,这就给语义理解带来一定困难,示例性的,用户通过语音进行请求查询时,由于对期望检索的影视名称记错、无法准确记清楚,或由于方言、语音识识别噪音等原因,导致识别的文本与用户期望之间存在差异;第二个是语言表达本身的多样性,也同样给语义理解带来困难;第三个是由于当前互联网的快速发展,各种新视频名称、音乐名称的出现给当前基于词库的语义理解带来了挑战。所以,如何准确的提取语义槽,提高语义理解的准确率成为本领域技术人员亟待解决的问题。
146.本技术实施例提供一种语义槽提取方法,如图6所示,包括:
147.s101、响应于用户发送的请求,对所述请求进行深度学习的语义槽位解析,确定第一语义槽。
148.需要解释的是,所述请求可以为将用户发送的语音消息转换成的文字内容,在该请求中用户可以表达出需要观看或者查找的内容。示例性的,所述请求可以为

阿盖的陈翔就减半综艺节目

。然后,通过深度学习的语义槽位解析,得到第一语义槽,示例性的,所述第一语义槽可以为阿盖:人名,陈翔就减半:视频名称;综艺:视频类型。
149.所述深度学习的语义槽位解析,利用的是数据驱动的,对文本进行概率化建模,离线训练好相关的深度学习解析模型。其主要解决一些未登录词或是泛化说法的问题,处理的语义槽实体类型包括像电视剧、音乐等动态增长的实体;像时间,所有的领域都需要的实体;像地名,数据量较大,说法多样性,词库无法包含的实体。具体的,如图7所示,所述深度学习的语义槽位解析利用的深度学习解析模型包括输入表示层、模型建模层和属性标注层。所述输入表示层,用于对输入句子中的字或者词进行编码处理,使得语义相似的字或词的表达是类似的。所述模型建模层,用于建模字或词的上下文关系。所述属性标注层,用于建模标签的上下文关系。
150.图7中,输入表示层(word embeddings)的输入为用户发送请求mark watney visited mars,

mark

的网络结构最终输出为

b-per

代表人名的开始;watney的网络结构的最终输出为

e-per

代表人名的结束;visited的网络结构最终输出为
″o″
代表当前词无意义;mars网络结构的最终输出为

s-loc

代表是地名。图中模型建模层(bi_lstm encoder)中,ii表示i单词考虑左侧上下文;ri表示i单词考虑右侧上下文;ci表示单词i考虑左右两侧上下文的结果。
151.由于所述第一语义槽是由请求直接通过深度学习的语义槽位解析确定的,所以如果请求中存在有误的文字内容,则第一语义槽内也可能存在有误的文字内容。示例性的,在上文的例子中,陈翔就减半:视频名称,正确的内容应该是陈翔六点半:视频名称。所以本技术实施例s102、检测所述请求的第一语义槽是否出现错误。s103、如果出现错误,则对所述
请求中与第一语义槽对应的内容进行修改,得到修改后的请求。
152.一些实施例中,检测所述请求的第一语义槽是否出现错误,可以通过词典来查找,词典存储有预设的语义槽内容,如果第一语义槽的内容未出现在词典中,则确定所述第一语义槽有误。在另一些实施例中,检测所述请求的第一语义槽是否出现错误,也可以通过分类器检错。通过分类器,如果出现错误,则分类器输出为1,如果未出现错误,分类器输出为0,所述分类器为一个深度学习模型,该模型经过训练后,可以直接确定出请求的第一语义槽是否出现错误。另外,本技术实施例并不限制确定请求的第一语义槽是否出现错误的模型的具体类别,如果有其他模型可以实现该功能也在本技术的保护范围之内。
153.在一些实施例中,检测第一语义槽是否出现错误时,可以仅针对第一语义槽中重要的部分进行检测,这样可以减少占用计算机资源。示例性,可以仅针对视频名称、音乐名称和应用名称对应的内容进行检测,在上文的例子中,可以针对陈翔就减半:视频名称进行检测,而对阿盖:人名,综艺:视频类型不进行检测。当第一语义槽出现错误时,将第一语义槽对应的内容进行修改。
154.一些实施例中,所述对请求中与第一语义槽对应的内容进行修改,得到修改后的请求的步骤,如图8所示,包括:
155.s1021、查找与所述第一语义槽对应的替换内容。
156.在一些实施例中,所述查找与所述第一语义槽对应的替换内容的步骤包括:
157.确定所述请求的业务领域。根据垂域,确定所述请求的业务领域,所述业务领域包括视频、音乐和应用。具体的,将用户请求输入,输入到预训练好的模型中,进行预测。预测输出相应的业务领域。示例性的,我想看电影、我想看陈翔六点半会输出视频业务领域;我想听音乐,我想听刘德华的歌曲会输出音乐业务领域。预训练好的模型为使用大批量的用户数据,对用户请求的业务领域使用深度学习的方式建模,并将模型存储。
158.由于第一语义槽中可能出现错误,所以需要将第一语义槽中的错误修正。本技术实施例根据所述业务领域,利用拼音索引、字形索引、音形码索引和语义索引,确定与第一语义槽对应的替换内容。
159.所述拼音索引是指在所述业务领域的范围内将错误的第一语义槽中相同拼音,或者近似拼音的内容,作为替换内容。所述字形索引是指在所述业务领域的范围内将错误的第一语义槽中相同的字形,或者近似字形的内容,作为替换内容,所述音形码索引是指在所述业务领域的范围内将错误的第一语义槽中相同的音形码,或者近似音形码的内容,作为替换内容。所述语义索引是指在所述业务领域的范围内将错误的第一语义槽,更换为语义相同或相似的内容,本技术并不限制于以上提到的确定与第一语义槽对应的替换内容的方法,任何不违背本技术的意思的方法均在本技术的保护范围之内。
160.这样可以当用户用方言或者语言识别错误出现的错字(同音字、同形字)、多字、少字和乱序等错误,可以基于媒资,利用拼音索引、字形索引、音形码索引和语义索引等方法,实现查找替换内容的目的。本技术实施例为了不遗漏替换内容,可以同时使用以上多种确定替换内容的方法。
161.s1022、利用所述替换内容,替换所述请求中与所述第一语义槽对应的内容,形成待确定请求。
162.由于利用的查找替换内容的方法可能存在一种或多种,所以查找到的替换内容的
数量有可能为一个或多个,进而形成的待确定请求的数量也不确定。所以本技术实施例通过待确定请求的数量,确定如何确定修改后的请求的方法。
163.s1023、如果所述待确定请求的数量为一个,则确定所述待确定请求为修改后的请求;
164.s1024、如果所述待确定请求的数量大于一个,则从多个待确定请求中,筛选出一个最优的待确定请求,作为修改后的请求。
165.本技术实施例可以将多个待确定请求,输入通过拼音、字符、热度、业务领域、标签等训练的深度学习模型,得到每个待确定请求的分值。最终,选取分值最高的待确定请求,作为修改后的请求。
166.由于利用深度学习的语义槽位解析确定的第一语义槽中,可能存在具有错误内容。所以s104、对修改后的请求进行文法语义槽位解析,确定第二语义槽。所述文法语义槽位解析,是指利用文法语义槽位解析,是指利用词库标签以及标签构成的语法规则确定第二语义槽,词库中的多条语法规则构成了语法树。示例性的,人名标签:杨幂、秦昊,视频名称标签:三生三世十里桃花、隐秘的角落,语法规则:人名标签和视频名称标签构成的语法规则。如果修改后的请求为杨幂演的三生三世十里桃花,则会匹配到这条语法规则,确定第二语义槽为三生三世十里桃花:视频名称,杨幂:人名。
167.这样,可以通过对修改后的请求进行文法语义槽位解析,得到没有错误内容的第二语义槽。示例性的,根据上文提到的例子,第二语义槽为:陈翔六点半:视频名称;综艺:视频类型。由于词典中人名不全,所以阿盖不在其中。
168.本技术实施例中s105、将所述第一语义槽和第二语义槽结合,得到所述请求的语义槽。由于文法语义槽位解析是利用词典处理的,但是词典的内容具有一定的局限性,而深度学习的语义槽位解析,并没有局限性,所以将二者结合,可以得到准确的语义槽,又可以得到正确的语义槽,达到提高提取语义槽的准确率和提高容错性的目的。
169.示例性的,第一语义槽为:阿盖:人名,陈翔就减半:视频名称;综艺:视频类型。第二语义槽为:陈翔六点半:视频名称;综艺:视频类型。将二者结合,得到语义槽为阿盖:人名;陈翔六点半:视频名称;综艺:视频类型。将第二语义槽中没有的内容,利用第一语义槽补充。
170.在一些实施例中,s106、如果未出现错误,则直接对所述请求进行文法语义槽位解析,确定第三语义槽;
171.s107、将所述第一语义槽和第三语义槽结合,得到所述请求的语义槽。所述第一语义槽和第三语义槽结合的方法,与第一语义槽和第二语义槽结合的方法相同,在此不再赘述。
172.上述实施例中,一种语义槽提取方法及显示设备,提高提取语义槽的准确性。该方法包括:响应于用户发送的请求,对所述请求进行深度学习的语义槽位解析,确定第一语义槽;检测所述请求的第一语义槽是否出现错误,如果出现错误,则对所述请求中与第一语义槽对应的内容进行修改,得到修改后的请求;对修改后的请求进行文法语义槽位解析,确定第二语义槽;将所述第一语义槽和第二语义槽结合,得到所述请求的语义槽。
173.最后应说明的是:以上各实施例仅用以说明本技术的技术方案,而非对其限制;尽管参照前述各实施例对本技术进行了详细的说明,本领域的普通技术人员应当理解:其依
然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本技术各实施例技术方案的范围。
174.为了方便解释,已经结合具体的实施方式进行了上述说明。但是,上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导,可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用,从而使得本领域技术人员更好的使用所述实施方式以及适于具体使用考虑的各种不同的变形的实施方式。
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献