一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

空想意识信息恢复系统的制作方法

2022-05-08 05:58:46 来源:中国专利 TAG:


1.本公开的实施方案总体上涉及心理生理系统,并且更具体地,涉及空想意识信息恢复系统。


背景技术:

2.空想是人的注意力在内心集中的一种精神状态,在日常生活中会经常发生。通常,空想者的思路与外部任务和刺激分离,并且漂移到可能与空想者当前的环境断开的对象,诸如过去的体验和未来的事件。
3.除了在大多数人中频繁发生之外,还已知空想具有许多益处。例如,空想者的思想穿越记忆的各个角落,潜意识地收集信息碎片,随后可将信息碎片连接起来。因为这样的连接通常表现为新颖而富有创造性的想法,所以空想关乎于增强创造性。此外,一些研究表明,空想与工作记忆的改善有关,工作记忆是大脑在存在注意力分散的情况下存储并随后回忆信息的能力(例如,levinson,d.b.,smallwood,j.,davidson,r.j.,psychol sci.2012年4月;23(4):375-80。思维的持久性:工作记忆在维持任务无关思维中的作用的证据(the persistence of thought:evidence for a role of working memory inthe maintenance of task-unrelated thinking)。在许多研究中,空想还与精神表现和生产力的改善以及压力水平的降低有关。因此,在日常生活中,空想时不仅可令人感到愉快,还具有智力生产和精神治疗的作用。
4.然而,当人进入空想状态时,根据定义,人不再具备针对他或她的周围环境的显著水平的注意力。因此,空想者通常无法记下与在空想会话期间发生的体验和事件有关的信息。结果,一个人体验某一水平的空想的能力和他体验并记住与他在空想时的周围环境相关联的事件的能力之间存在折衷。
5.如上所述,用于使人能够进行空想而不会错过空想期间发生的事件的改进技术将是有用的。


技术实现要素:

6.各种实施方案提出了一种用于在用户处于空想状态时记录听觉内容的系统。所述系统包括:感测模块,所述感测模块被配置为从用户收集生理信息;音频输入装置,所述音频输入装置被配置为捕获用户附近的环境中的听觉内容;以及一个或多个处理器,所述一个或多个处理器被配置为:基于从用户收集的第一生理信息来确定所述用户已进入内心集中注意力的状态;以及作为响应,记录由所述音频输入装置捕获的所述听觉内容。
7.所公开的实施方案的至少一个技术改进在于,用户可以自由地享受拥有空想会话或其他自发的、自我引导的想法和联想的益处,而不会错过在空想会话期间用户可听见的外部听觉体验或内容。所公开的实施方案的另一个技术改进在于,可以不同的形态向用户提供并且/或者以更适宜的速度回放这样的外部听觉体验和/或内容。这些技术优点提供了优于现有技术方法的一个或多个技术进步。
附图说明
8.为了能够详细地理解一个或多个实施方案的上述特征,可通过参考某些特定实施方案来对以上简要概述的一个或多个实施方案进行更具体的描述,附图中示出了所述特定实施方案中的一些。然而,应注意,附图仅示出典型的实施方案,并且因此不应被视为以任何方式限制其范围,因为所述各种实施方案的范围也涵盖其他实施方案。
9.图1是示出被配置为实现一个或多个实施方案的空想意识信息恢复系统的框图;
10.图2是根据一个或多个实施方案的在图1的空想意识信息恢复系统中的信息恢复控制器的框图;
11.图3是示出根据本公开的一个或多个方面的包括空想意识信息恢复系统的头戴式耳机系统的示意图。
12.图4是示出根据各个实施方案的包括空想意识信息恢复系统的耳戴式装置的示意图。
13.图5示出了根据各个实施方案的用于基于检测到用户所体验的空想状态进行信息恢复的方法步骤的流程图。
14.图6是根据各个实施方案的计算装置的图示。
15.为清楚起见,在适用的情况下,已经使用相同的附图标记来指代各附图中通用的相同元件。可预期的是,一个实施方案的特征可并入其他实施方案中,而无需进一步叙述。
具体实施方式
16.图1是示出被配置为实现一个或多个实施方案的空想意识信息恢复系统100的框图。空想意识信息恢复系统100被配置为:确定用户已进入空想状态,从用户的周围环境捕获听觉内容,以及在合适的时间将捕获的听觉内容提供给用户。在一些实施方案中,空想意识信息恢复系统100被配置为一旦用户已退出空想状态就提供捕获的听觉内容,而在其他实施方案中,空想意识信息恢复系统100被配置为在稍后的用户选择的时间提供捕获的听觉内容。在一些实施方案中,空想意识信息恢复系统100被配置为经由音频记录来捕获听觉内容,该音频记录随后经由音频回放被提供给用户。替代地或另外,在一些实施方案中,空想意识信息恢复系统100被配置为:经由音频记录来捕获听觉内容,将听觉内容改变成不同的形态(例如,基于文本的消息),然后将不同形态的听觉内容提供给用户。在这样的实施方案中,听觉内容可在空想停止之后立即和/或在用户选择的时间以不同的形态被提供给用户。此外,在这样的实施方案中,空想意识信息恢复系统100可被配置为创建不同形态内容的日志,以供用户随后消费。在图1所示的实施方案中,空想意识信息恢复系统100包括:一个或多个生理传感器110;用户接口模块120;信息恢复控制器130;一个或多个音频输入装置140;以及一个或多个音频输出装置150。
17.生理传感器110被配置为接收或以其他方式监测来自用户102的生理信息,其中这种生理信息使得能够检测用户102的空想状态。生理传感器110可包括一个或多个感测装置,用于检测与用户102相关联的一种或多种类型的生理信息。
18.在一些实施方案中,生理传感器110包括用于脑电图(eeg)的传感器,其可例如以脑波模式的形式测量用户102的大脑中的电活动。在这样的实施方案中,生理传感器110包括:两个或更多个eeg传感器,其被配置为接触用户102的头部表面;以及耦合到电接地(诸
如用户102的身体的另一表面)的传感器。在这样的实施方案中,空想意识信息恢复系统100包括:被配置为在用户102的头部的第一半球(例如头部的左半部)上接触头部的第一表面的至少一个eeg传感器;以及被配置为在用户102的头部的第二半球(例如头部的右半部)上接触头部的第二表面的至少一个eeg传感器。通常,越多的eeg传感器提供越准确的eeg信息。因此,在一些实施方案中,空想意识信息恢复系统100包括多个eeg传感器,其中该多个eeg传感器的第一部分被配置为接触头部的第一半球上的表面,并且该多个eeg传感器的第二部分被配置为接触头部的第二半球上的表面。
19.在一些实施方案中,生理传感器110包括用于皮肤电活动的传感器。在这样的实施方案中,生理传感器110包括被配置为接触用户102的身体部分的表面(诸如面部、颈部、耳部、手臂、手等的表面)并测量皮肤电导率和/或皮肤温度的至少一个传感器。在一些实施方案中,生理传感器110包括用于通过随时间对用户102的瞳孔大小进行成像来实现基于相机的瞳孔测量的一个或多个传感器。在这样的实施方案中,生理传感器110包括被导向用户102的一只或两只眼睛的一个或多个相机,其中这样的相机被配置为记录用户102的一只或两只瞳孔当前的大小。在一些实施方案中,生理传感器110包括用于执行用户102的一个或多个生理度量的反射光感测的一个或多个传感器。在这样的实施方案中,生理传感器110包括被配置为被定位在用户102的身体的至少一个表面上的一个或多个传感器。由这样的传感器执行的测量(诸如对血管的测量)使得能够确定脉搏率、呼吸率和血氧饱和度水平以及其他生理度量。
20.在一些实施方案中,生理传感器110包括用于分析用户102的运动的一个或多个惯性测量单元(imu)传感器。在这样的实施方案中,生理传感器110包括被配置为使得能够确定用户102的呼吸率的一个或多个传感器。例如,imu可用于通过检测与呼吸相关联的小的和/或微观的周期性运动来确定用户102的呼吸率。替代地或另外,在一些实施方案中,imu的输出可指示宏观运动,该宏观运动可由合适的算法或机器学习模块用来确定用户102是否已停止运动或变得基本上静止。在这样的实施方案中,这样的确定可被包括作为指示用户102可能已进入空想状态的输入。
21.在一些实施方案中,生理传感器110中所包括的传感器中的一个或多个传感器被并入头戴式装置或可穿戴计算装置(诸如音频头戴式耳机设备、智能头戴式耳机系统、音频耳机/耳塞或一对音频耳机/耳塞、智能耳机、一副智能眼镜等)中。下面结合图3和图4更详细地描述这样的实施方案的实例。
22.用户接口模块120被配置为接收用户输入,以用于控制空想意识信息恢复系统100的某些操作,并将这样的输入传输到信息恢复控制器130。因此,用户接口模块120使得用户102能够控制空想意识信息恢复系统100的某些操作。这样的操作的实例包括:开机和关机,开始监测用户102的梦状态,开始回放在用户102的特定梦状态期间记录的信息,选择这样的信息由空想意识信息恢复系统100提供给用户102时的形态等。
23.在一些实施方案中,用户接口模块120包括一个或多个物理按钮或开关,其可例如被并入到包括一个或多个生理传感器110的头戴式装置中。在一些实施方案中,用户接口模块120包括手势接口,诸如用于检测用户102敲击的一个或多个惯性测量单元(imu),用于检测用户102触摸的一个或多个电阻式和/或电容式传感器,用于检测用户102的其他手势或选择的一个或多个力传感器等。在一些实施方案中,用户接口模块120包括无线接口,该无
线接口被配置为连接到与用户102相关联的计算装置,诸如智能电话、电子平板、膝上型计算机、智能手表等。在这样的实施方案中,无线接口还被配置为与在这样的计算装置上执行的控制应用通信,使得用户102可经由计算装置向空想意识信息恢复系统100提供输入。在一些实施方案中,用户接口模块120包括语音控制系统,该语音控制系统被配置为解释来自用户102的语音命令并将这样的命令传送到在计算装置上执行的控制应用。
24.音频输入装置140包括一个或多个传声器,该一个或多个传声器被配置为接收用户102周围或附近的环境中的听觉内容。因此,当用户102被确定为处于空想状态时,用户102可听见的声音和/或话音可由一个或多个音频输入装置140捕获(例如,接收到和/或检测到)。在一些实施方案中,音频输入装置140包括一系列多个传声器,该一系列多个传声器被配置为从用户102周围的多个方向接收听觉内容。在一些实施方案中,可在用户102周围全方向性地捕获听觉内容。
25.在一些实施方案中,一个或多个音频装置140被并入头戴式装置或可穿戴计算装置中。替代地或另外,在一些实施方案中,空想意识信息恢复系统100的一个或多个音频装置140不被实现为头戴式或可穿戴计算装置的物理传声器。在这样的实施方案中,来自头戴式或可穿戴计算装置外部的音频装置的音频流被用来接收用户102周围或附近的环境中的听觉内容。例如,在这样的实施方案中,当用户102被确定为处于空想状态时,由空想意识信息恢复系统100接收从会议呼叫会话和/或从电话呼叫捕获的音频流。因此,当用户参加会议呼叫或电话呼叫并进入空想状态时,空想意识信息恢复系统100记录来自会议呼叫系统的音频(例如,来自传统会议呼叫桌面设备,来自运行视频会议应用的计算装置,来自执行呼叫的电话或智能电话等)。因此,在这样的实施方案中,由一个或多个音频装置140生成音频输入流,该一个或多个音频装置未被包括在包括空想意识信息恢复系统100的头戴式或可穿戴计算装置中。
26.音频输出装置150包括一个或多个扬声器,该一个或多个扬声器被配置为向用户102提供听觉内容,诸如在空想状态期间用户102可听见的并且已由音频输入装置140捕获的声音和/或话音。一旦用户102已被确定退出空想状态,就可经由音频输出装置150向用户102回放这样的听觉内容。在一些实施方案中,音频输出装置150被配置为提供这样的听觉内容作为用户102附近的其他人不可听见的私人听觉内容。在这样的实施方案中,音频输出装置150被并入到头戴式音频装置或头戴式智能装置(诸如头戴式耳机设备或耳机设备)中。
27.信息恢复控制器130被配置为控制空想意识信息恢复系统100的各种操作和功能。这样的操作和功能包括以下一项或多项:从生理传感器110接收生理信息;基于这样的生理信息确定用户102已进入空想状态;从音频输入装置140接收听觉内容;在用户102处于空想状态时确定用户102可听见话音;对从音频输入装置140接收的听觉内容执行音频处理(例如,话音澄清);对从音频输入装置140接收的听觉内容的至少一部分执行话音转文本操作;将某些听觉内容传输到音频输出装置150以用于回放给用户102;对被传输到音频输出装置150的这种听觉内容执行音频处理(例如,回放速度加速);对基于从音频输入装置140接收的听觉内容生成的文本的至少一部分执行文本转话音操作;以及/或者经由用户接口模块120接收用户输入并对该用户输入作出响应。下面结合图2描述信息恢复控制器130的一个实施方案。
28.图2是根据一个或多个实施方案的信息恢复控制器130的框图。如图所示,信息恢复控制器130包括以下部件中的一个或多个:空想检测模块210,语音分类模块220,音频输入处理模块230,话音转文本模块240,文本转话音模块250,音频输出处理模块260和/或用户接口控制器270。在以下描述中,信息恢复控制器130的某些功能在上述部件之间被划分。在其他实施方案中,一个或多个上述部件的功能被组合到单个装置或模块中。
29.空想检测模块210被配置为基于以一个或多个传感器输出的形式从生理传感器110接收的生理信息来确定用户102何时进入和/或退出空想状态。在一些实施方案中,从生理传感器110接收的传感器输出是原始(例如,未经预处理的)传感器信息。在一些实施方案中,生理传感器110中的一个或多个生理传感器被配置为提供经预处理的数据,诸如包括已超过阈值或已检测到特定状态的指示的数据。
30.在一些实施方案中,空想检测模块210被配置为当如从生理传感器110接收的传感器输出所指示的已发生特定的事件或事件组合时则确定用户102已进入或退出空想状态。这样的事件的实例包括:超过阈值,诸如用户102的皮肤电导率变化的阈值;或者检测到特定的状态,诸如检测到用户102的特定的eeg脑波模式。因此,在这样的实施方案中,来自空想检测模块210的输出可包括指示用户102当前是否处于空想状态的布尔变量值。
31.在一些实施方案中,空想检测模块210被配置为通过采用和/或包括机器学习分类器算法来确定用户102已进入空想状态。在这样的实施方案中,机器学习分类器算法被编程或训练为基于从生理传感器110接收的传感器输出来分类(例如,确定)用户102处于空想状态。在这样的实施方案中,根据将从生理传感器110接收的传感器输出的特定类型与空想的神经状态相关联的数据集来预先训练机器学习分类器算法。结果,基于来自生理传感器110的传感器输出的特定集合,机器学习分类器算法可确定用户102当前处于空想状态的概率。基于这样的概率,空想检测模块210确定用户102是否处于空想状态。在这样的实施方案中,来自空想检测模块210的输出可包括指示用户102当前是否处于空想状态的布尔变量值。
32.在一些实施方案中,训练数据集可以是基于大量用户生成的通用数据集。在一些实施方案中,训练数据集可以是基于使用用户102的数据的一个或多个训练会话而生成的用户特定数据集。在一些实施方案中,训练数据集可以是通用数据和用户特定数据的组合。
33.语音分类模块220被配置为在用户102处于空想状态时确定用户102可听见话音。在一些实施方案中,语音分类模块220被配置为在用户102体验的当前空想会话期间基于从音频输入装置140接收的听觉内容来确定这样的话音。在一些实施方案中,语音分类模块220包括机器学习分类器算法,该机器学习分类器算法被训练成检测从音频输入装置140接收的听觉内容中的话音。在一些实施方案中,当语音分类模块220在用户102处于空想状态时检测到话音时,信息恢复控制器130捕获、记录以及在一些实施方案中修改在用户102体验的当前空想会话期间从音频输入装置140接收的听觉内容。
34.音频输入处理模块230被配置为对从音频输入装置140接收的听觉内容执行音频处理(诸如话音澄清)。这样的音频处理有助于由话音转文本模块240根据从音频输入装置140接收的听觉内容来生成文本。
35.话音转文本模块240被配置为对从音频输入装置140接收的听觉内容的至少一部分执行话音转文本操作。在采用话音转文本模块240的实施方案中,存储由话音转文本模块240生成的文本以用于在当前空想会话之后提供给用户102。在一些实施方案中,信息恢复
控制器130经由音频输出装置150将这样的文本以合成的话音的形式提供给用户102。替代地或另外,在一些实施方案中,信息恢复控制器130将这样的文本以基于文本的信息的形式(诸如文本文件或基于文本的消息)提供给用户102,以用于传输到与用户102相关联的计算装置。因此,在这样的实施方案中,信息恢复控制器130将从音频输入装置140接收的听觉内容改变成不同的内容形态。此外,在一些实施方案中,由信息恢复控制器130提供的基于文本的信息可包括从音频输入装置140接收的一些或全部听觉内容的逐字或接近逐字的副本。替代地或另外,在一些实施方案中,由信息恢复控制器130提供的基于文本的信息可包括与从音频输入装置140接收的一些或全部听觉内容相关联的概括文本。在这样的实施方案中,话音转文本模块240可包括本领域已知的用于文本概括的一种或多种算法和/或方法。
36.文本转话音模块250被配置为对基于从音频输入装置140接收的听觉内容生成的文本的至少一部分执行文本转话音操作。文本转话音模块250采用这样的文本作为对文本转话音语音合成器的输入,以生成用于由音频输出装置150回放给用户102的音频。在采用文本转话音模块250的实施方案中,音频文件可在当前空想会话之后被提供给用户102之前被存储。
37.音频输出处理模块260被配置为在将听觉内容传输到音频输出装置150之前对听觉内容执行音频处理。在一些实施方案中,这样的音频处理包括确定被传输到音频输出装置150的听觉内容的回放速度。在一些实施方案中,音频输出处理模块260基于一个或多个因素来确定回放速度。这些因素的实例包括与用户102相关联的回放速度的用户偏好,与经由用户接口模块120接收的用户输入相关联的回放速度,以及时间间隔的持续时间。在一些实施方案中,回放速度基于与用户102体验的当前空想会话相关联的时间间隔。在一些实施方案中,回放速度基于记录听觉内容的时间间隔,诸如特定空想会话的持续时间。
38.在一些实施方案中,音频输出处理模块260被配置为提高在当前空想会话结束之后回放给用户102的音频文件的回放速度。因此,用户102可在持续时间比刚完成的空想会话的持续时间短的时间间隔内收听错过的听觉内容的表示(诸如音频文件)。在一些实施方案中,音频输出处理模块260被配置为基于刚完成的空想会话的持续时间来提高向用户102回放的音频文件的回放速度。因此,在这样的实施方案中,即使特定空想会话可能具有相对长的持续时间,用户102也可相对快速地回顾错过的听觉内容。替代地或另外,在一些实施方案中,音频输出处理模块260被配置为基于与用户102相关联的回放速度的用户偏好或基于经由用户接口模块120接收的用户输入来提高这样的音频文件的回放速度。因此,在这样的实施方案中,用户102可以用户102选择的或感觉舒适的提高的速度来回顾错过的听觉内容。
39.在一些实施方案中,由音频输出处理模块260对听觉内容执行的音频处理包括消除听觉内容外部的一个或多个语音,诸如存在于用户102周围或附近的环境中的语音。例如,在这样的实施方案中,音频输出处理模块260可包括语音消除算法。因此,在这样的实施方案中,用户102可收听错过的听觉内容的表示,而不会被用户102周围或附近的环境中的语音和/或对话干扰。
40.用户接口控制器270被配置为经由用户接口模块120接收用户输入并对该用户输入作出响应。取决于用户接口模块120的配置,这样的用户输入可包括以下一项或多项:经
由按钮或开关的物理输入,由音频输入装置140接收的语音命令,经由触摸屏接收的手势,由imu接收的手指敲击等。基于这样的用户输入,用户接口控制器270致使空想意识信息恢复系统100的某些功能或操作开始、停止和/或改变。这样的操作或功能的实例包括:开机和关机,开始监测用户102的梦状态,开始回放在用户102的特定梦状态期间记录的信息,在将这样的信息提供给用户102时选择这样的信息的形态等。
41.除了上述功能之外,在一些实施方案中,信息恢复控制器130还被配置为在特定空想会话之后记录听觉内容。也就是说,在确定用户102已退出特定空想会话之后,信息恢复控制器130继续记录用户102可听见的听觉内容。因此,当用户102错过的听觉内容的表示被提供给用户102时,附加的听觉内容被捕获并随后被提供给用户102,使得用户102可以提高的速度收听全部听觉内容,直到用户102赶上当前时间的听觉内容。在这样的实施方案中,可以与上述在空想会话期间错过的听觉内容相同的方式修改在特定空想会话之后捕获的听觉内容的形态和/或提高回放速度。
42.在一些实施方案中,生理传感器110中所包括的传感器中的一个或多个传感器被并入头戴式装置或可穿戴计算装置中。图3示出了一个这样的实施方案,并且图4示出了另一个这样的实施方案。
43.图3是示出根据本公开的一个或多个方面的包括空想意识信息恢复系统100的头戴式耳机系统300的示意图。头戴式耳机系统300可包括但不限于经由相应的臂302联接到头带303的两个耳杯301。在图3所示的实施方案中,头戴式耳机系统300被配置为环绕型头戴式耳机系统,其中每个耳杯301被配置为适配在用户的外耳上。在替换性实施方案中,头戴式耳机系统300被配置为贴耳型头戴式耳机系统,其中每个耳杯301被配置为适配抵靠用户的外耳。在一些实施方案中,头戴式耳机系统300可被配置有单个耳杯301而不是两个耳杯301。
44.在一些实施方案中,每个耳杯301尤其包括扬声器322、联接到壳体305的耳周缓冲垫304、一个或多个生理传感器110,并且在一些实施方案中,imu 307被设置在一个或两个耳杯301内。在其他实施方案中,一个或多个imu 307可被设置在头带303内。在一些实施方案中,一个或多个生理传感器110也被设置在头带303上。如图所示,被并入头戴式耳机系统300中的一个或多个生理传感器110各自被定位成与用户头部(未示出)的表面的不同部分接触。也就是说,当用户穿戴头戴式耳机系统300时,耳周缓冲垫304的部分密封抵靠用户的头部,使得耳杯301中的每个生理传感器110与用户头部的一部分的表面接触。因此,本文所述的经由与用户身体的一部分接触而生成传感器输出的任何生理传感器110可如图所示被并入头戴式耳机系统300中。应注意,头戴式耳机系统300非常适于包括:被配置为接触用户头部的第一半球的第一表面的第一多个eeg传感器310;以及被配置为接触用户头部的第二半球的第二表面的第二多个eeg传感器320,其中第一半球和第二半球是相对的半球。
45.在一些实施方案中,在耳戴式装置(诸如耳塞系统、耳机或可听计算装置)中实现空想意识信息恢复系统100。图4示出了一个这样的实施方案。图4是示出根据各个实施方案的包括空想意识信息恢复系统100的耳戴式装置400的示意图。耳戴式装置400包括但不限于左耳塞401和右耳塞402,其各自经由有线连接403联接到插头组件420。替代地,左耳塞401和/或右耳塞402可被配置为无线耳塞、无线耳机或可听计算装置。
46.在图4所示的实施方案中,如图所示,耳戴式装置400还可包括用户接口模块120,
该用户接口模块可被并入与左耳塞401、右耳塞402和插头组件420耦合的音量控制模块中。耳戴式装置400还包括被设置在左耳塞401和右耳塞402的一个或多个表面上的生理传感器110。因此,当用户已插入左耳塞401和右耳塞402时,生理传感器110被定位成与用户耳道内的相应位置接触并可生成准确的传感器输出,诸如与用户相关联的生理信息。
47.在图4所示的实施方案中,被并入耳戴式装置400中的生理传感器110被配置为接触穿戴耳戴式装置400的用户的耳道的一部分的表面。在其他实施方案中,被并入耳戴式装置400中的生理传感器110可被配置为接触用户头部的任何其他合适的表面(诸如外耳)、用户头部接近外耳的部分、用户身体与用户接口模块120和/或有线连接403接触的部分等。因此,被并入耳戴式装置400中的一个或多个生理传感器110可被设置在耳戴式装置400的与左耳塞401和右耳塞402分离的部件内。
48.在一些实施方案中,在任何其他可穿戴计算装置(诸如一副智能眼镜、智能手表和/或智能戒指)中实现空想意识信息恢复系统100。在这样的实施方案中,生理传感器110可被设置在用户的一个或多个表面上,并且可由空想意识信息恢复系统100无线地轮询。因此,在这样的实施方案中,可测量诸如eeg、皮肤电导率和/或皮肤温度等度量。在智能眼镜的情况下,生理传感器110可被设置在智能眼镜的被配置为与用户的头部表面接触的一个或多个表面上。替代地或另外,在一些实施方案中,生理传感器110可被设置在智能眼镜的面向用户瞳孔的一个或多个表面上。因此,在这样的实施方案中,可执行瞳孔测量。替代地或另外,在一些实施方案中,生理传感器110可被包括在空想意识信息恢复系统100外部的计算装置(诸如智能电话、电子平板和/或头戴式显示器,诸如增强现实/虚拟现实/扩展现实头戴式受话器)中。在这样的实施方案中,可采用这样的计算装置中所包括的面向用户的相机来执行瞳孔测量,特别是当这样的计算设备被配置有激光雷达和/或雷达传感器和/或眼睛动作检测软件时。此外,在一些实施方案中,空想意识信息恢复系统100外部的计算装置中所包括的生理传感器110可至少部分地基于眼睛动作检测来促进空想检测。例如,如由生理传感器110所检测到的,检测到用户102的眼睛注视指向(或远离)特定位置可指示用户102已进入空想状态。在另一个实例中,如由生理传感器110所检测到的,对用户102在该部分上的眼睛朝向(例如,平行凝视或未注视任何事物)的检测可指示用户102已进入空想状态。
49.图5示出了根据各个实施方案的用于基于检测到用户102体验的空想状态来进行信息恢复的方法步骤的流程图。尽管相对于图1至图4的系统描述了方法步骤,但是被配置为以任何顺序执行方法步骤的任何系统都落入各种实施方案的范围内。
50.如图所示,方法500开始于步骤502,在该步骤中,空想意识信息恢复系统100开始操作。在一些实施方案中,空想意识信息恢复系统100每当由用户102穿戴时则开始操作。在其他实施方案中,当用户102经由用户接口模块120执行适合的输入以启动空想意识信息恢复系统100时,空想意识信息恢复系统100开始操作。
51.在步骤504中,信息恢复控制器130基于从生理传感器110接收的一个或多个传感器输出来确定用户102是否正在空想。如果信息恢复控制器130确定用户102未正在空想,则方法500返回到步骤504;如果信息恢复控制器130确定用户102正在空想,则方法500进行到步骤506。在一些实施方案中,信息恢复控制器130经由空想检测模块210和从空想意识信息恢复系统100接收的传感器输出做出这样的确定。
52.在一些实施方案中,在步骤506中,信息恢复控制器130确定用户102当前是否可听见听觉内容。如果信息恢复控制器130确定用户102不可听见听觉内容,则方法500返回到步骤506;如果信息恢复控制器130确定用户102可听见听觉内容,则方法500进行到步骤508。
53.在其他实施方案中,在步骤506中,信息恢复控制器130确定用户102当前是否可听见尤其包括话音的听觉内容。在这样的实施方案中,如果信息恢复控制器130未检测到话音或包含话音的听觉内容,则方法500返回到步骤506;如果信息恢复控制器130检测到话音或包含话音的听觉内容,则方法500进行到步骤508。在一些实施方案中,信息恢复控制器130可采用语音分类模块220来检测由一个或多个音频输入装置140捕获的听觉内容中的话音或包含话音的听觉内容。
54.在步骤508中,信息恢复控制器130开始捕获经由音频输入装置140接收到的听觉内容。在一些实施方案中,信息恢复控制器130记录听觉内容以用于随后回放给用户102。在这样的实施方案中,可生成一个或多个音频文件以用于回放给用户102,并且以这种方式被记录的听觉内容可基本上类似于经由音频输入装置140接收到的听觉内容。在一些实施方案中,信息恢复控制器130还可采用音频输出处理模块160来确定并实现由信息恢复控制器130存储的音频文件的较快回放速度。
55.在一些实施方案中,生成由音频输入装置140捕获的听觉内容的表示,可根据经由音频输入装置140捕获的听觉内容来显著地修改该表示。在一些实施方案中,信息恢复控制器130开始记录听觉内容,将听觉内容的形态修改为不同的形态,然后以不同的形态存储听觉内容以用于随后提供给用户102。在一些实施方案中,信息恢复控制器130采用音频输入处理模块230来对听觉内容执行话音澄清,采用话音转文本模块240来对听觉内容的至少一部分(诸如听觉内容的被确定为话音的部分)执行话音转文本操作,并且/或者存储或以其他方式记录文本的文本文件以用于随后提供给用户102。因此,文本文件捕获听觉内容的一部分,即使该文本文件是与由音频输入装置140接收到的听觉内容不同的形态。由文本文件捕获的听觉内容随后可以作为音频消息(在下面的步骤522中生成)被提供给用户102,一旦用户102已退出空想状态就回放该音频消息。替代地或另外,由文本文件捕获的听觉内容可随后作为基于文本的消息被提供给用户102(例如经由传输到与用户102相关联的计算装置)。这样的计算装置的实例包括智能手表、一些其他可穿戴计算装置、智能电话、电子平板、膝上型计算机、与用户102的电子邮件账户相关联的电子邮件服务器等。
56.在步骤510中,信息恢复控制器130基于从生理传感器110接收到的一个或多个传感器输出来确定用户102是否已退出当前的空想状态。如果信息恢复控制器130确定用户102尚未退出当前的空想状态,则方法500返回到步骤510,并且信息恢复控制器130继续捕获听觉内容;如果信息恢复控制器130确定用户102已退出当前的空想状态,则方法500进行到步骤512。
57.在步骤512中,信息恢复控制器130确定音频回放速度(例如基于刚完成的空想会话的持续时间和/或基于与用户102相关联的回放速度的用户偏好)。在一些实施方案中,信息恢复控制器130采用音频输出处理模块260来确定音频回放速度。
58.在步骤514中,信息恢复控制器130开始提供基于在步骤508中捕获的听觉内容的听觉内容。在一些实施方案中,在步骤514中,信息恢复控制器130开始回放基于在步骤508中捕获的听觉内容的音频文件。在一些实施方案中,音频文件是对这样的听觉内容的记录。
59.在一些实施方案中,音频文件是这样的听觉内容的表示,诸如基于文本文件呈现的合成语音,该文本文件又基于在步骤508中捕获的听觉内容。在这样的实施方案中,信息恢复控制器130将在步骤508中生成的文本文件转换为音频文件。在这样的实施方案中,信息恢复控制器130可采用文本转话音模块250来合成通过在步骤508中所执行的话音转文本操作生成的话音。在一些实施方案中,信息恢复控制器130存储或以其他方式记录合成的话音的音频文件以用于随后回放给用户102。在这样的实施方案中,用户102错过的并且被包括在合成的话音的音频文件中的听觉内容是压缩的话音,其中的暂停和无关的声音不被提供给用户102。替代地或另外,在一些实施方案中,对用户102错过的并且被包括在合成的话音的音频文件中的听觉内容进行概括。因此,在这样的实施方案中,用户102可经由压缩话音的回放更快地赶上错过的听觉内容。
60.替代地或另外,在一些实施方案中,在步骤508中所捕获的听觉内容经由基于文本的消息被提供给用户102。在这样的实施方案中,基于文本的消息包括在步骤508中通过话音转文本处理(诸如由话音转文本模块240)生成的文本。
61.在步骤516中,信息恢复控制器130确定用户102是否已回顾直到当前时间的听觉内容。也就是说,信息恢复控制器130确定用户102是否已回顾由信息恢复控制器130捕获的直到当前时间的听觉内容。如果用户102未赶上当前时间,则方法500返回到步骤516;如果用户102赶上了当前时间,则方法500进行到步骤518。应注意,在图5所示的实施方案中,信息恢复控制器130在确定用户102已退出当前的空想状态之后继续捕获听觉内容。
62.在步骤518中,信息恢复控制器130停止从用户102周围的环境中捕获听觉内容,并且停止所捕获的听觉内容的音频回放。方法500然后返回到步骤502。
63.图6是根据各个实施方案的计算装置600的图示。计算装置600被配置为实现本文所述的本公开的至少一个方面。计算装置600可以是能够执行应用程序的任何类型的装置,该应用程序包括但不限于与以下相关联的指令:信息恢复控制器130、空想检测模块210、语音分类模块220、音频输入处理模块230、话音转文本模块240、文本转话音模块250、音频输出处理模块260和/或用户接口控制器270。例如但不限于,计算装置600可以是电子平板、智能电话、膝上型计算机、可穿戴装置等。替代地,计算装置600可被实现为独立芯片(诸如微处理器)或实现为被实现为专用集成电路(asic)、片上系统(soc)等更全面的解决方案的一部分。通常,计算装置600可被配置为协调基于计算机的系统(诸如空想意识信息恢复系统100)的整体操作。在其他实施方案中,计算装置600可被耦合到这样的基于计算机的系统,但与该系统分离。在这样的实施方案中,基于计算机的系统可包括向计算装置600传输数据的单独的处理器,并且可被包括在消费电子装置(诸如个人计算机、智能电话或基于头戴式耳机的装置)中。如图所示,计算设备600包括但不限于处理器610,输入/输出(i/o)装置620和存储器630。此外,除了本地驻留在计算装置600上的模块之外,一个或多个特定的计算密集型模块可被实现为云服务。例如,话音转文本模块240和/或文本转话音模块250是可有利地在云中被实现的模块。在一个这样的实施方案中,原始音频信息可从音频输入处理模块230被无线地传输到基于云的话音转文本模块240,该基于云的话音转文本模块则连接到基于云的文本转话音模块250。在该实施方案中,文本转话音模块250则可发送回文本文件以由音频输出处理模块260本地输出。在替代性实施方案中,话音转文本模块240在云中被实现,而文本转话音模块250不在云中被实现。在另一个替代性实施方案中,文本转话音模块
250在云中被实现,而话音转文本模块240不在云中被实现。
64.处理器610可被实现为中央处理单元(cpu)、图形处理单元(gpu)、专用集成电路(asic)、现场可编程门阵列(fpga)、任何其他类型的处理单元或不同的处理单元的组合。通常,处理器610可以是任何技术上可行的硬件单元,其能够处理数据和/或执行软件应用,以有助于如本文所述的空想意识信息恢复系统100的操作。尤其是但不限于此,处理器610可被配置为执行与以下相关联的指令:信息恢复控制器130、空想检测模块210、语音分类模块220、音频输入处理模块230、话音转文本模块240、文本转话音模块250、音频输出处理模块260和/或用户接口控制器270。
65.存储器630可包括随机存取存储器(ram)模块、快闪存储器单元或任何其他类型的存储器单元或它们的组合,并且可包括单个存储器模块或存储器模块的集合。如图所示,在一些实施方案中,在操作期间,信息恢复控制器130、空想检测模块210、语音分类模块220、音频输入处理模块230、话音转文本模块240、文本转话音模块250、音频输出处理模块260和/或用户接口控制器270中的一些或全部可驻留在存储器630中。
66.i/o装置620包括:至少一个能够接收输入的装置,诸如键盘、鼠标、触敏屏幕、传声器(诸如音频输入装置140)等;以及至少一个能够提供输出的装置,诸如显示屏、扬声器(包括与音频输出装置150相关联的扬声器)等。显示屏可被并入空想意识信息恢复系统100中,或者可在空想意识信息恢复系统100的外部,诸如被并入到单独的手持装置中的计算机监视器、视频显示屏、显示设备,或者任何其他技术上可行的显示屏。
67.总之,空想意识信息恢复系统被配置为:确定用户已进入空想状态,从用户的周围环境中捕获听觉内容,以及在合适的时间(诸如在用户完成空想之后)向用户提供所捕获的听觉内容。可修改所捕获的听觉内容以有助于由用户回顾,并且在一些实施方案中,可将所捕获的听觉内容转换为基于文本的消息。可穿戴装置中所包括的生理传感器监测用户,并且使得空想意识信息恢复系统确定用户已进入或退出空想状态。
68.所公开的实施方案的至少一个技术改进在于,用户可自由地享受拥有空想会话或其他自发的、自我引导的想法和联想的益处,而不会错过在空想会话期间用户可听见的外部听觉体验或内容。所公开的实施方案的另一个技术改进在于,可以不同的形态向用户提供并且/或者以更适宜的速度回放这样的外部听觉体验和/或内容。这些技术优点提供了优于现有技术方法的一个或多个技术进步。
69.1.在一些实施方案中,一种系统包括:感测模块,所述感测模块被配置为从用户收集生理信息;音频输入装置,所述音频输入装置被配置为捕获所述用户附近的环境中的听觉内容;以及一个或多个处理器,所述一个或多个处理器被配置为:基于从用户收集的第一生理信息来确定所述用户已进入内心集中注意力的状态;以及作为响应,记录由所述音频输入装置捕获的所述听觉内容。
70.2.如条款1所述的系统,其中:所述系统还包括音频输出装置,所述音频输出装置被配置为将记录的听觉内容递送给所述用户;并且所述一个或多个处理器还被配置为:基于从所述用户收集的第二生理信息来确定所述用户已退出所述内心集中注意力的状态;以及致使所述音频输出装置向所述用户回放所述记录的听觉内容。
71.3.如条款1或2所述的系统,其还包括头戴式部件,其中所述音频输出装置被设置在所述头戴式部件中。
72.4.如条款1至3中任一项所述的系统,其中所述一个或多个处理器还被配置为在记录之后修改所述记录的听觉内容。
73.5.如条款1至4中任一项所述的系统,其中所述一个或多个处理器被配置为通过以下操作中的至少一者来修改捕获的听觉内容:对所述捕获的听觉内容执行信号处理操作,改变所述捕获的听觉内容的回放速度,或者将所述捕获的听觉内容改变成不同的内容形态。
74.6.如条款1至5中任一项所述的系统,其中所述一个或多个处理器还被配置为基于以下项中的至少一者来改变所述捕获的听觉内容的回放速度:用户偏好,或者期间捕获所述听觉内容的时间间隔的持续时间。
75.7.如条款1至6中任一项所述的系统,其中所述感测模块被配置为从由以下项组成的组中收集生理信息:脑电图测量、皮肤电活动测量、皮肤温度测量、瞳孔测量、反射光感测测量和惯性测量单元。
76.8.如条款1至7中任一项所述的系统,其还包括头戴式部件,其中所述感测模块的至少一个传感器被设置在所述头戴式部件中。
77.9.如条款1至8中任一项所述的系统,其中所述一个或多个处理器还被配置为:在致使所述音频输入装置捕获所述听觉内容之前,确定所述用户附近的环境中存在可听话音内容;以及基于所述可听话音内容,启用对所述听觉内容的捕获。
78.10.一种方法,其包括:利用由用户穿戴的头戴式装置中所包括的传感器来收集第一生理信息;经由所述头戴式装置中所包括的音频输入装置捕获所述用户附近的环境中的听觉内容;基于所述第一生理信息来确定所述用户已进入内心集中注意力的状态;以及作为响应,记录由所述音频输入装置捕获的所述听觉内容。
79.11.如条款10所述的方法,其还包括:基于利用所述传感器从所述用户收集的第二生理信息来确定所述用户已退出所述内心集中注意力的状态;以及致使所述头戴式装置中所包括的音频输出装置向所述用户回放记录的听觉内容。
80.12.如条款10或11所述的方法,其中所述音频输出装置还被配置为私下向所述用户回放所述记录的听觉内容。
81.13.如条款10至12中任一项所述的方法,其还包括修改所述记录的听觉内容。
82.14.如条款10至13中任一项所述的方法,其还包括通过以下操作中的至少一者来修改捕获的听觉内容:对所述捕获的听觉内容执行信号处理操作,改变所述捕获的听觉内容的回放速度,或者将所述捕获的听觉内容改变成不同的内容形态。
83.15.如条款10至14中任一项所述的方法,其中所述不同的内容形态包括以下项中的至少一者:用于传输到与所述用户相关联的计算装置的基于文本的消息,用于传输到所述计算装置的音频消息,或者用于向所述用户回放的基于从所述捕获的听觉内容生成的基于文本的消息的音频消息。
84.16.如条款10至15中任一项所述的方法,其还包括以下项中的至少一者:将所述基于文本的消息传输到所述计算装置,或者将所述音频消息传输到所述计算装置。
85.17.如条款10至16中任一项所述的方法,其还包括基于以下项中的至少一者来改变所述捕获的听觉内容的回放速度:用户偏好,或者期间捕获所述听觉内容的时间间隔的持续时间。
86.18.一种或多种非暂时性计算机可读介质,所述一种或多种非暂时性计算机可读介质存储指令,所述指令在由一个或多个处理器执行时致使所述一个或多个处理器执行以下步骤:利用由用户穿戴的头戴式装置中所包括的传感器来收集第一生理信息;经由所述头戴式装置中所包括的音频输入装置捕获所述用户附近的环境中的听觉内容;基于所述第一生理信息来确定所述用户已进入内心集中注意力的状态;以及作为响应,记录由所述音频输入装置捕获的所述听觉内容。
87.19.如条款18所述的一种或多种非暂时性计算机可读介质,其中:基于利用所述传感器从所述用户收集的第二生理信息来确定所述用户已退出所述内心集中注意力的状态;以及致使所述头戴式装置中所包括的音频输出装置向所述用户回放记录的听觉内容。
88.20.如条款18或19所述的一种或多种非暂时性计算机可读介质,其中所述指令在由所述一个或多个处理器执行时致使所述一个或多个处理器在记录之后执行修改所述记录的听觉内容的步骤。
89.在任何权利要求中引用的任何权利要求要素和/或在本技术中描述的任何要素的任何和所有组合以任何方式落入本发明和保护的预期范围内。
90.各种实施方案的描述已出于说明目的而呈现,但并非意图为穷举的或限于所公开的实施方案。在不脱离所描述的实施方案的范围和精神的情况下,许多修改和变化对于本领域普通技术人员来说将是明显的。
91.本实施方案的各方面可体现为系统、方法或计算机程序产品。因此,本公开的各方面可以采用完全硬件实施方案、完全软件实施方案(包括固件、常驻软件、微代码等)或结合软件和硬件方面的实施方案的形式,它们在本文中可以统称为“模块”或“系统”。另外,本公开中描述的任何硬件和/或软件技术、过程、功能、部件、引擎、模块或系统可被实现为电路或电路的集合。此外,本公开的各方面可采用计算机程序产品的形式,所述计算机程序产品在其上实施有计算机可读程序代码的至少一种计算机可读介质中实施。
92.可利用至少一种计算机可读介质的任何组合。计算机可读介质可为计算机可读信号介质或计算机可读存储介质。计算机可读存储介质可以是例如但不限于电子、磁性、光学、电磁、红外或半导体系统、设备或装置或前述介质的任何合适组合。计算机可读存储介质的更具体示例(非详尽性列表)将包括以下项:具有至少一个导线的电气连接、便携式计算机软盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦可编程只读存储器(eprom或快闪存储器)、光纤、便携式光盘只读存储器(cd-rom)、光学存储装置、磁存储装置或前述介质的任何合适组合。在本文档的上下文中,计算机可读存储介质可以是可含有或存储供指令执行系统、设备或装置使用或与其结合使用的程序的任何有形介质。
93.参考根据本公开的实施方案的方法、设备(系统)和计算机程序产品的流程图图解和/或框图来描述本公开的各方面。应理解,流程图图解和/或框图中的每个框以及流程图图解和/或框图中的框的组合能够通过计算机程序指令来实现。这些计算机程序指令可以被提供给通用计算机、专用计算机或其他可编程数据处理设备的处理器以生成机器,使得经由计算机或其他可编程数据处理设备的处理器执行的指令能够实施流程图和/或框图的一个或多个框中指定的功能/动作。此类处理器可为但不限于通用处理器、专用处理器、应用特定处理器或现场可编程处理器或门阵列。
94.附图中的流程图和框图示出了根据本公开的各种实施方案的系统、方法和计算机
程序产品的可能实现方式的体系架构、功能和操作。在这个方面,流程图或框图中的每个框可以表示代码的模块、区段或部分,所述代码包括用于实现所指定的逻辑功能的至少一个可执行指令。还应注意,在一些替代实现方式中,框中所提出的功能可不按附图中提出的顺序发生。例如,实际上依据所涉及的功能性,可基本上同时执行连续示出的两个框,或者有时可以相反的顺序执行所述框。还应注意,框图和/或流程图图解的每个框以及框图和/或流程图图解中的框的组合可以由执行规定的功能或动作的基于专用硬件的系统或者专用硬件和计算机指令的组合来实现。
95.虽然前述内容针对本公开的实施方案,但是可在不脱离本公开的基本范围的情况下设计出本公开的其他和更多实施方案,且其范围由所附权利要求确定。
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献