脑机交互装置、系统和方法与流程

1.本技术涉及人机交互领域，特别是涉及脑机交互装置、系统和方法。


背景技术：

2.随着人机交互技术的不断发展，基于脑电信号、肌电信号等生物电信号的交互技术的应用价值不断提高。当人眼注视固定刷新频率的刺激图像时，大脑皮层会产生一个与该固定刷新频率相关联的响应，即稳态视觉诱发电位(ssvep)。例如，当人眼注视的刺激图像的刷新频率为15hz时，大脑中会产生15hz、30hz、45hz等特定频率的电位响应。
3.为了实现脑电控制，现有技术中利用稳态视觉诱发电位的特性，在屏幕上显示一系列不同刷新频率的刺激图像，通过分析用户的脑电信号判断用户正在注视哪个刺激图像，并根据判断结果输出控制指令，从而实现脑电控制。但是，由于刺激图像只能直接在屏幕上进行显示，刺激图像的刷新频率会受到屏幕刷新频率的限制，导致刺激图像的刷新频率不够稳定。
4.针对相关技术中存在的刺激图像的刷新频率不够稳定的技术问题，目前还没有提出有效的解决方案。


技术实现要素：

5.在本实施例中提供了一种脑机交互装置、系统和方法，以解决相关技术中刺激图像的刷新频率不够稳定的问题。
6.第一方面，在本实施例中提供了一种脑机交互装置，所述脑机交互装置包括显示模块、采集模块以及处理模块，其中：
7.所述显示模块，用于获取多个待识别交互图像并显示，所述待识别交互图像包括独立光源投射到显示界面形成的图像，所述显示界面的刷新频率与所述待识别交互图像的闪烁频率不同；
8.所述采集模块，用于获取被采集者基于所述待识别交互图像产生的脑电信号，并将所述脑电信号传输至所述处理模块；
9.所述处理模块，用于接收所述脑电信号并进行识别以获取识别结果，所述识别结果包括被采集者注视的目标交互图像。
10.在其中的一些实施例中，多个所述待识别交互图像的闪烁频率均不相同。
11.在其中的一些实施例中，所述处理模块还用于控制独立光源将所述待识别交互图像投射到显示界面，并调节所述待识别交互图像的显示位置和/或显示内容。
12.在其中的一些实施例中，所述采集模块还用于对所述脑电信号进行预处理操作，所述预处理操作包括信号放大、信号滤波、信号降噪中的至少一种。
13.在其中的一些实施例中，所述处理模块还用于获取所述脑电信号的频率特征，并基于所述频率特征获取所述识别结果。
14.在其中的一些实施例中，所述处理模块还用于基于典型相关分析方法和/或fft频
谱分析方法对所述频率特征进行分析，以获取所述识别结果。
15.在其中的一些实施例中，所述处理模块还用于获取所述识别结果对应的控制指令，并将所述控制指令传输至对应的执行模块，以使所述执行模块执行所述控制指令。
16.在其中的一些实施例中，所述待识别交互图像的闪烁频率的范围为4-80hz。
17.第二方面，在本实施例中提供了一种脑机交互系统，应用于ar设备或vr设备，所述脑机交互系统包括显示镜片、采集模块以及主机，其中：
18.所述显示镜片，用于获取多个待识别交互图像并显示，所述待识别交互图像包括独立光源投射到显示界面形成的图像，所述显示界面的刷新频率与所述待识别交互图像的闪烁频率不同；
19.所述采集模块，用于获取被采集者基于所述待识别交互图像产生的脑电信号，并将所述脑电信号传输至所述主机；
20.所述主机，用于接收所述脑电信号并进行识别以获取识别结果，所述识别结果包括被采集者注视的目标交互图像。
21.第三方面，在本实施例中提供了一种脑机交互方法，包括：
22.获取多个待识别交互图像并显示，所述待识别交互图像包括独立光源投射到显示界面形成的图像，所述显示界面的刷新频率与所述待识别交互图像的闪烁频率不同；
23.获取被采集者基于所述待识别交互图像产生的脑电信号；
24.对所述脑电信号进行识别以获取识别结果，所述识别结果包括被采集者注视的目标交互图像。
25.与相关技术相比，在本实施例中提供的脑机交互装置、系统和方法，所述脑机交互装置包括显示模块、采集模块以及处理模块，其中：所述显示模块，用于获取多个待识别交互图像并显示，所述待识别交互图像包括独立光源投射到显示界面形成的图像，所述显示界面的刷新频率与所述待识别交互图像的闪烁频率不同；所述采集模块，用于获取被采集者基于所述待识别交互图像产生的脑电信号，并将所述脑电信号传输至所述处理模块；所述处理模块，用于接收所述脑电信号并进行识别以获取识别结果，所述识别结果包括被采集者注视的目标交互图像。通过独立光源投射以获取待识别交互图像，使得待识别交互图像的闪烁频率不会受到屏幕刷新频率的影响，解决了脑机交互过程中刺激图像的刷新频率不够稳定的技术问题，提高了脑机交互的准确性。
26.本技术的一个或多个实施例的细节在以下附图和描述中提出，以使本技术的其他特征、目的和优点更加简明易懂。
附图说明
27.此处所说明的附图用来提供对本技术的进一步理解，构成本技术的一部分，本技术的示意性实施例及其说明用于解释本技术，并不构成对本技术的不当限定。在附图中：
28.图1是本发明一实施例的脑机交互装置的结构框图；
29.图2是本发明另一实施例的脑机交互装置的结构框图；
30.图3是本发明一实施例的待识别交互图像的示意图；
31.图4是本发明另一实施例的脑机交互装置的结构框图；
32.图5是本发明一实施例的待识别交互图像信号的波形图；
33.图6是本发明另一实施例的脑机交互装置的结构框图；
34.图7是本发明另一实施例的脑机交互装置的结构框图；
35.图8是本发明另一实施例的脑机交互装置的结构框图；
36.图9是本发明一实施例的脑机交互系统的结构示意图；
37.图10是本发明一实施例的脑机交互方法的流程示意图；
38.图11是本发明另一实施例的脑机交互方法的流程示意图。
具体实施方式
39.为更清楚地理解本技术的目的、技术方案和优点，下面结合附图和实施例，对本技术进行了描述和说明。
40.除另作定义外，本技术所涉及的技术术语或者科学术语应具有本技术所属技术领域具备一般技能的人所理解的一般含义。在本技术中的“一”、“一个”、“一种”、“该”、“这些”等类似的词并不表示数量上的限制，它们可以是单数或者复数。在本技术中所涉及的术语“包括”、“包含”、“具有”及其任何变体，其目的是涵盖不排他的包含；例如，包含一系列步骤或模块(单元)的过程、方法和系统、产品或设备并未限定于列出的步骤或模块(单元)，而可包括未列出的步骤或模块(单元)，或者可包括这些过程、方法、产品或设备固有的其他步骤或模块(单元)。在本技术中所涉及的“连接”、“相连”、“耦接”等类似的词语并不限定于物理的或机械连接，而可以包括电气连接，无论是直接连接还是间接连接。在本技术中所涉及的“多个”是指两个或两个以上。“和/或”描述关联对象的关联关系，表示可以存在三种关系，例如，“a和/或b”可以表示：单独存在a，同时存在a和b，单独存在b这三种情况。通常情况下，字符“/”表示前后关联的对象是一种“或”的关系。在本技术中所涉及的术语“第一”、“第二”、“第三”等，只是对相似对象进行区分，并不代表针对对象的特定排序。
41.示例性地，当人眼注视固定刷新频率的刺激图像时，大脑皮层会产生一个与该固定刷新频率相关联的响应，即稳态视觉诱发电位(ssvep)。在现有技术中常常利用稳态视觉诱发电位实现意念打字，即在屏幕上显示不同的字母，每个字母按照各自的刷新频率进行闪烁，同时采集被采集者的脑电信号，通过对脑电信号中的频率成分进行分析以判断被采集者注视的字母，实现意念打字。此外基于稳态视觉诱发电位还可以控制物体或者机器的行动方向以实现意念控制，本发明对此不再赘述。
42.请参阅图1，图1是本发明一实施例的脑机交互装置的结构框图。在本实施例中，脑机交互装置包括显示模块100、采集模块200以及处理模块300，其中：显示模块100，用于获取多个待识别交互图像并显示，待识别交互图像包括独立光源投射到显示界面形成的图像，显示界面的刷新频率与待识别交互图像的闪烁频率不同；采集模块200，用于获取被采集者基于待识别交互图像产生的脑电信号，并将脑电信号传输至处理模块300；处理模块300，用于接收脑电信号并进行识别以获取识别结果，识别结果包括被采集者注视的目标交互图像。
43.示例性地，显示模块100包括但不限于具有图像获取及显示功能的模块，用于获取并显示待识别交互图像。其中，待识别交互图像为第三方独立光源投射到显示模块100的显示界面形成的图像，并且该显示界面的刷新频率与待识别交互图像的闪烁频率不同。可以理解的，显示模块100的显示界面还可用于显示自身的图像，以作为待识别交互图像的背
景。
44.示例性地，采集模块200用于获取被采集者的脑电信号，并将该脑电信号传输至处理模块300。具体的，当被采集者注视某个待识别交互图像中的内容时，其脑电信号中会出现与待识别交互图像的闪烁频率相关联的成分，即稳态视觉诱发电位(ssvep)。采集被采集者的脑电信号并进行分析，即可知道被采集者注视的是哪个待识别交互图像，由此实现脑机交互。
45.示例性地，处理模块300用于接收采集模块200传输的脑电信号，并对脑电信号的频率成分进行分析和识别，以获取最终的识别结果。其中，该识别结果包括被采集者注视的目标交互图像。根据该识别结果，可以执行与目标交互图像相关的操作，例如输入目标交互图像中的字符，或者执行目标交互图像中的指令等。具体的，目标交互图像可以是待识别交互图像中的任一个。
46.本实施例中脑机交互装置包括显示模块、采集模块以及处理模块，其中：显示模块，用于获取多个待识别交互图像并显示，待识别交互图像包括独立光源投射到显示界面形成的图像，显示界面的刷新频率与待识别交互图像的闪烁频率不同；采集模块，用于获取被采集者基于待识别交互图像产生的脑电信号，并将脑电信号传输至处理模块；处理模块，用于接收脑电信号并进行识别以获取识别结果，识别结果包括被采集者注视的目标交互图像。通过独立光源投射以获取待识别交互图像，使得待识别交互图像的闪烁频率不会受到屏幕刷新频率的影响，解决了脑机交互过程中刺激图像的刷新频率不够稳定的技术问题，提高了脑机交互的准确性。
47.在另一个实施例中，多个待识别交互图像的闪烁频率均不相同。
48.示例性地，显示模块100中获取的多个待识别交互图像的闪烁频率均不相同。可以理解的，当被采集者注视不同的待识别交互图像时，由于待识别交互图像的闪烁频率不同，且被采集者的脑电信号的频率成分与注视的待识别交互图像的闪烁频率相关联，因此被采集者产生的脑电信号中的频率成分也不相同。基于此，可以对被采集者注视的待识别交互图像进行分析和识别。
49.请参阅图2，图2是本发明另一实施例的脑机交互装置的结构框图。具体的，显示模块100包括分别与处理模块300相连的第一独立发光单元110、第二独立发光单元120以及图像显示单元130，其中：第一独立发光单元110，用于产生第一独立光源，并将第一独立光源投射至图像显示单元130，以形成第一待识别交互图像；第二独立发光单元120，用于产生第二独立光源，并将第二独立光源投射至图像显示单元130，以形成第二待识别交互图像；图像显示单元130，用于将第一待识别交互图像以及第二待识别交互图像叠加至显示界面。
50.示例性地，第一独立发光单元110基于预设的第一闪烁频率和显示内容产生第一独立光源，并将该第一独立光源投射到图像显示单元130，在图像显示单元130的显示界面形成第一待识别交互图像。
51.示例性地，第二独立发光单元120基于预设的第二闪烁频率和显示内容产生第二独立光源，并将该第二独立光源投射到图像显示单元130，在图像显示单元130的显示界面形成第二待识别交互图像。可以理解的，第一待识别交互图像的闪烁频率和显示内容与第二待识别交互图像不同。
52.示例性地，图像显示单元130用于获取第一待识别交互图像以及第二待识别交互
图像，并将第一待识别交互图像以及第二待识别交互图像叠加到显示界面，并与图像显示单元130自身的图像一起显示在显示界面。可以理解的，本实施例中显示界面的刷新频率与本实施例中的第一待识别交互图像以及第二待识别交互图像的闪烁频率均不相同。
53.请参阅图3，图3是本发明一实施例的待识别交互图像的示意图。具体的，图像显示单元130除了显示自身的图像以外，还会在刺激区域叠加第一独立发光单元110以及第二独立发光单元120投射的第一独立光源以及第二独立光源，以形成第一待识别交互图像以及第二待识别交互图像。其中，第一待识别交互图像和第二待识别交互图像可以包括不同的闪烁频率和显示内容，还可以包括不同的区域大小、动态效果等，本实施例对此不再赘述。
54.请参阅图4，图4是本发明另一实施例的脑机交互装置的结构框图。具体的，显示模块100还包括第一驱动单元140以及第二驱动单元150，第一驱动单元140与第一独立发光单元110相连，第二驱动单元150与第二独立发光单元120相连，其中：第一驱动单元140，用于控制第一独立发光单元110按照第一闪烁频率进行变换；第二驱动单元150，用于控制第二独立发光单元120按照第二闪烁频率进行变换。
55.示例性地，第一驱动单元140用于对第一独立发光单元110的闪烁频率进行控制，使得第一独立发光单元110能够按照第一闪烁频率进行变换，并在显示界面的预设位置显示第一待识别交互图像。在其中一个具体实施例中，第一驱动单元140为pwm驱动电路。
56.示例性地，第二驱动单元150用于对第二独立发光单元120的闪烁频率进行控制，使得第二独立发光单元120能够按照第二闪烁频率进行变换，并在显示界面的预设位置显示第二待识别交互图像。在其中一个具体实施例中，第二驱动单元150为pwm驱动电路。可以理解的，第一闪烁频率与第二闪烁频率的数值大小并不相同。
57.示例性地，本实施例中的第一驱动单元140以及第二驱动单元150还分别与处理模块300进行连接，由处理模块300对第一驱动单元140以及第二驱动单元150进行配置，以获取相应的驱动信号，进一步对第一独立发光单元110以及第二独立发光单元120的闪烁频率进行调制。
58.请参阅图5，图5是本发明一实施例的待识别交互图像信号的波形图。在其中一个具体实施例中，显示界面通常以高频率进行调制(例如1khz)，其调制周期为tc，则显示界面的调制频率为：
[0059][0060]
其中，显示界面自身的图像中所有像素按照预设的刷新频率进行刷新(例如60hz、90hz、120hz、144hz等)。第一闪烁频率以及第二闪烁频率的数值大小均与显示界面的预设刷新频率不同，并且第一闪烁频率与第二闪烁频率之间也不相同。不同的待识别交互图像区域通过不同的闪烁频率，诱发被采集者产生不同频率的脑电信号。具体的，第一待识别交互图像的信号周期为ta，第一闪烁频率的大小：
[0061][0062]
第二待识别交互图像的信号周期为tb，第二闪烁频率的大小：
[0063][0064]
本实施例中多个待识别交互图像的闪烁频率均不相同，当被采集者注视不同的待识别交互图像时，由于待识别交互图像的闪烁频率不同，且被采集者的脑电信号的频率成分与注视的待识别交互图像的闪烁频率相关联，因此被采集者产生的脑电信号中的频率成分也不相同。基于此，可以确定每个待识别交互图像所对应的唯一脑机交互指令，提高了脑机交互的准确性。
[0065]
在另一个实施例中，独立光源包括独立发光像素以及独立投射光源中的至少一种。
[0066]
示例性地，独立光源可以是穿插在显示界面的像素队列中的多个独立发光像素，以在显示界面形成独立的待识别交互图像；也可以是第三方投射的独立光源，通过显示界面的反射形成独立的待识别交互图像。
[0067]
具体的，第一独立发光单元110可以是独立发光像素驱动单元或者独立光源投射单元，也可以是其他类型的独立发光单元，还可以是上述独立发光单元的组合，本实施例对此不作限制。其中，独立发光像素驱动单元用于驱动显示界面的独立发光像素，该独立发光像素穿插于显示界面的屏幕像素队列中，以在任意位置形成任意内容的第一待识别交互图像，并与显示界面自身的图像叠加在一起；独立光源投射单元用于通过投影、反射等方式将其发出的独立光源投射到显示界面，形成第一待识别交互图像并与显示界面自身的图像进行叠加。具体的，独立光源投射单元可以是led光源投射单元。可以理解的，本实施例也适用于第二独立发光单元120，对此本实施例不再赘述。
[0068]
在另一个实施例中，处理模块300还用于控制独立光源将待识别交互图像投射到显示界面，并调节待识别交互图像的显示位置和/或显示内容。
[0069]
示例性地，处理模块300还用于调制独立光源，并控制独立光源将待识别交互图像投射到显示界面，进一步调节待识别交互图像在显示界面的显示位置和/或显示内容。具体的，根据具体的使用场景和交互需求，对待识别交互图像的位置和内容进行调节，使得显示界面范围内能够显示不同图像内容和闪烁频率的待识别交互图像。
[0070]
在另一个实施例中，采集模块200还用于对脑电信号进行预处理操作，预处理操作包括信号放大、信号滤波、信号降噪中的至少一种。
[0071]
示例性地，采集模块200在获取被采集者的脑电信号后，进一步对脑电信号进行预处理操作。其中，预处理操作包括信号放大、信号滤波以及信号降噪等，还可以包括其他信号处理方法，本实施例对此不作限制。
[0072]
请参阅图6，图6是本发明另一实施例的脑机交互装置的结构框图。具体的，采集模块200包括相互连接的信号采集单元210以及信号处理单元220，其中：信号采集单元210，用于采集获取被采集者基于待识别交互图像产生的脑电信号；信号处理单元220，用于对脑电信号进行预处理操作，并将处理后的脑电信号传输至处理模块300。
[0073]
示例性地，信号采集单元210与用户头部接触，用于采集被采集者基于待识别交互图像产生的脑电信号，并将脑电信号传输至信号处理单元220。由于基于待识别交互图像产生的脑电信号与大脑的视觉皮层活动相关，因此优选地在枕叶区采集脑电信号。在其中一个具体实施例中，信号采集单元210包括电极，电极与头皮接触，以采集脑电信号。
[0074]
示例性地，信号处理单元220的输入端与信号采集单元210的输出端连接，信号处理单元220的输出端与处理模块300的输入端连接，用于获取信号采集单元210传输的脑电信号，并对脑电信号进行预处理操作，最后将经过预处理操作的脑电信号传输至处理模块300。在其中一个具体实施例中，信号处理单元220包括但不限于滤波电路以及信号放大电路。
[0075]
本实施例采集模块200还用于对脑电信号进行预处理操作，预处理操作包括信号放大、信号滤波、信号降噪中的至少一种。通过对获取的脑电信号进行预处理操作，提高了脑电信号的质量，进一步提高了脑机交互的准确性。
[0076]
在另一个实施例中，处理模块300还用于获取脑电信号的频率特征，并基于频率特征获取识别结果。
[0077]
示例性地，处理模块300获取脑电信号后，对脑电信号进行分析，并提取脑电信号的频率特征，基于该频率特征匹配对应的识别结果，即被采集者注视的目标交互图像。可以理解的，脑电信号的频率特征与被采集者注视的待识别交互图像的闪烁频率相关联，基于该特性可以准确获取被采集者注视的目标交互图像。
[0078]
在另一个实施例中，处理模块300还用于基于典型相关分析方法和/或fft频谱分析方法对频率特征进行分析，以获取识别结果。
[0079]
示例性地，处理模块300获取脑电信号的频率特征后，基于典型相关分析方法或者fft频谱分析方法对频率特征进行分析，从而获取最终的识别结果。其中，典型相关分析方法是指利用综合变量之间的相关关系来反映两组指标之间的整体相关性的多元统计分析方法，fft频谱分析方法是指基于快速傅里叶变换对频率信号进行分解的方法。可以理解的，基于典型相关分析方法或fft频谱分析方法，可以更准确地对频率特征进行分析以获取识别结果，进一步提高脑机交互的准确性。
[0080]
在另一个实施例中，处理模块300还用于获取识别结果对应的控制指令，并将控制指令传输至对应的执行模块，以使执行模块执行控制指令。
[0081]
示例性地，处理模块300对脑电信号进行分析并获取识别结果，进一步获取该识别结果对应的控制指令，可以理解的，识别结果与控制指令的对应关系是预先存储在数据库的。获取控制指令后，将该控制指令传输给对应的执行模块，并控制该执行模块指令该控制指令，最终实现脑机交互。
[0082]
请参阅图7，图7是本发明另一实施例的脑机交互装置的结构框图。具体的，处理模块300包括相互连接的处理单元310以及通信单元320，其中：处理单元310，用于接收脑电信号并进行分析以得到频率特征，基于频率特征获取识别结果，并输出识别结果对应的控制指令至通信单元320；通信单元320，用于接收控制指令，并将控制指令传输至对应的执行模块，以使执行模块执行控制指令，实现脑机交互。
[0083]
示例性地，处理单元310的输入端还与采集模块200的输出端连接，处理单元310的输出端与通信单元320的输入端连接，以用于获取采集模块200输出的脑电信号，并对脑电信号进行处理，提取脑电信号中的频率特征，进一步基于频率特征得到识别结果，最终将识别结果对应的控制指令传输至通信单元320。具体的，通过cca分析或者fft频谱分析等方法对频率特征进行分析以得到识别结果，并基于该识别结果匹配对应的控制指令。其中，识别结果包括被采集者注视的目标交互图像，控制指令用于控制对应的执行模块执行相关操
作。在其中一个具体实施例中，处理单元310包括但不限于中央处理器。
[0084]
可选的，处理单元310还可以进一步对脑电信号进行滤波、去噪等处理操作，以进一步提高脑电信号的质量。
[0085]
示例性地，通信单元320的输入端与处理单元310的输出端连接，通信单元320的输出端与执行模块进行连接，用于接收处理单元310传输的控制指令，并将控制指令传输至对应的执行模块，使得执行模块执行相关操作，从而实现处理单元310与执行模块之间的业务通信。
[0086]
在另一个实施例中，处理模块300还用于获取脑机交互指令，并基于脑机交互指令控制显示模块100以及采集模块200。
[0087]
示例性地，处理模块300获取用户或者其他设备输出的脑机交互指令，根据脑机交互指令对显示模块100以及采集模块200进行控制。具体的，处理模块300基于脑机交互指令控制显示模块100以及采集模块200的运行。
[0088]
在其中一个具体实施例中，在进行脑机交互之前，处理模块300获取用户的脑机交互指令，并控制显示模块100以及采集模块200进入工作状态，以开始脑机交互。具体的，脑机交互指令可以由用户输入，也可以由处理模块300根据用户的某一动作直接获取。
[0089]
请参阅图8，图8是本发明另一实施例的脑机交互装置的结构框图。具体的，显示模块100包括头戴式设备显示单元160、第一独立发光单元110、第二独立发光单元120、图像显示单元130、第一驱动单元140以及第二驱动单元150，采集模块200包括信号采集单元210以及信号处理单元220，处理模块300包括处理单元310以及通信单元320。此外，本实施例中的脑机交互装置还包括多个执行模块。
[0090]
具体的，显示模块100中的第一驱动单元140以及第二驱动单元150的输入端与处理单元310连接，第一驱动单元140以及第二驱动单元150的输出端分别与第一独立发光单元110以及第二独立发光单元120连接，以用于根据处理单元310的控制指令对第一独立发光单元110以及第二独立发光单元120的闪烁频率进行调控；第一独立发光单元110以及第二独立发光单元120的输入端分别与第一驱动单元140以及第二驱动单元150连接，以根据第一驱动单元140以及第二驱动单元150的调控指令产生预设频率的独立光源，进一步在显示界面形成闪烁频率不同的第一待识别交互图像以及第二待识别交互图像；图像显示单元130与处理单元310相连，用于显示自身的图像，并将第一待识别交互图像以及第二待识别交互图像叠加至图像显示单元130自身的图像；头戴式设备显示单元160分别于第一独立发光单元110、第二独立发光单元120以及图像显示单元130连接，用于将获取待识别交互图像，并将待识别交互图像显示于用户眼前。
[0091]
示例性地，采集模块200中的信号采集单元210信号处理单元220连接，信号采集单元210一端接触被采集者脑部，以采集脑电信号，并将脑电信号传输至信号处理单元220；信号处理单元220的输入端与信号采集单元210的输出端连接，用于获取信号采集单元210输出的脑电信号，并对脑电信号进行滤波、去噪、放大等预处理操作，最后将经过预处理操作的脑电信号传输至处理单元310。
[0092]
示例性地，处理模块300中的处理单元310的输入端与信号处理单元220相连，处理模块300的输出端与通信单元320相连，用于接收信号处理单元220传输的脑电信号并进行分析，获取脑电信号的识别结果，并将该识别结果对应的控制指令传输至通信单元320；通
信单元320的输入端与处理单元310相连，通信单元320的输出端与多个执行模块相连，用于获取控制指令并将该控制指令分发给多个执行模块，使得执行模块执行相关指令操作，最终实现脑机交互。
[0093]
本实施例中处理模块300还用于获取脑机交互指令，并基于脑机交互指令控制显示模块100以及采集模块200。通过处理模块300获取的脑机交互指令对显示模块100以及采集模块200进行控制，提高了脑机交互装置各个模块的协调性与集成性。
[0094]
在另一个实施例中，待识别交互图像的闪烁频率的范围为4-80hz。
[0095]
示例性地，能够诱发稳态视觉诱发电位的闪烁频率大概分为三个范围：低频区(4-15hz)、中频区(15-30hz)以及高频区(30-80hz)。其中，低频区和中频区虽然比较容易诱发稳态视觉诱发电位，但是也容易引起视觉疲劳、头晕等不适感，甚至可能诱发癫痫，因此不宜长期使用。
[0096]
优选的，由于高频区的图像闪烁较快，人眼不会轻易察觉，因此视觉效果更为舒适。在其中一个具体实施例中，第一待识别交互图像的第一闪烁频率为30hz，第二待识别交互图像的第二闪烁频率为45hz，显示界面的刷新频率为60hz。
[0097]
需要说明的是，上述各个模块可以是功能模块也可以是程序模块，既可以通过软件来实现，也可以通过硬件来实现。对于通过硬件来实现的模块而言，上述各个模块可以位于同一处理器中；或者上述各个模块还可以按照任意组合的形式分别位于不同的处理器中。
[0098]
请参阅图9，图9公开了本发明一实施例的脑机交互系统的结构示意图。在另一个实施例中，脑机交互系统应用于ar设备或vr设备，脑机交互系统包括显示镜片、采集模块以及主机，其中：显示镜片，用于获取多个待识别交互图像并显示，待识别交互图像包括独立光源投射到显示界面形成的图像，显示界面的刷新频率与待识别交互图像的闪烁频率不同；采集模块，用于获取被采集者基于待识别交互图像产生的脑电信号，并将脑电信号传输至主机；主机，用于接收脑电信号并进行识别以获取识别结果，识别结果包括被采集者注视的目标交互图像。该脑机交互系统还可以包括交互模块，交互模块位于采集模块和主机之间，用于传输采集模块与主机之间的数据。
[0099]
请参阅图10，图10是本发明一实施例的脑机交互方法的流程示意图。在本实施例中，脑机交互方法包括：
[0100]
s2：获取多个待识别交互图像并显示，待识别交互图像包括独立光源投射到显示界面形成的图像，显示界面的刷新频率与待识别交互图像的闪烁频率不同。
[0101]
示例性地，获取多个待识别交互图像并在显示界面显示。其中，待识别交互图像为第三方独立光源投射到显示界面形成的图像，并且该显示界面的刷新频率与待识别交互图像的闪烁频率不同。可以理解的，显示界面还用于显示自身的图像，以作为待识别交互图像的背景。
[0102]
s4：获取被采集者基于待识别交互图像产生的脑电信号。
[0103]
示例性地，获取被采集者的脑电信号。具体的，当被采集者注视某个待识别交互图像中的内容时，其脑电信号中会出现与待识别交互图像的闪烁频率相关联的成分，即稳态视觉诱发电位。采集被采集者的脑电信号并进行分析，即可知道被采集者注视的是哪个待识别交互图像，由此实现脑机交互。
[0104]
s6：对脑电信号进行识别以获取识别结果，识别结果包括被采集者注视的目标交互图像。
[0105]
示例性地，对脑电信号的频率成分进行分析和识别，以获取最终的识别结果。其中，该识别结果包括被采集者注视的目标交互图像。根据该识别结果，可以执行与目标交互图像相关的操作，例如输入目标交互图像中的字符，或者执行目标交互图像中的指令等。
[0106]
请参阅图11，图11是本发明另一实施例的脑机交互方法的流程示意图。具体的，对驱动电路进行配置，以控制发光单元按照不同的预设闪烁频率进行变换；在显示设备显示待识别交互图像，并采集与待识别交互图像相关联的脑电信号；对脑电信号进行分析以获取识别结果，最后输出与识别结果相关联的控制指令，控制相关设备执行指令操作，实现脑机交互。
[0107]
本实施例获取多个待识别交互图像并显示，待识别交互图像包括独立光源投射到显示界面形成的图像，显示界面的刷新频率与待识别交互图像的闪烁频率不同；获取被采集者基于待识别交互图像产生的脑电信号；对脑电信号进行识别以获取识别结果，识别结果包括被采集者注视的目标交互图像。通过独立光源投射以获取待识别交互图像，使得待识别交互图像的闪烁频率不会受到屏幕刷新频率的影响，解决了脑机交互过程中刺激图像的刷新频率不够稳定的技术问题，提高了脑机交互的准确性。
[0108]
需要说明的是，在上述流程中或者附图的流程图中示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
[0109]
应该明白的是，这里描述的具体实施例只是用来解释这个应用，而不是用来对它进行限定。根据本技术提供的实施例，本领域普通技术人员在不进行创造性劳动的情况下得到的所有其它实施例，均属本技术保护范围。
[0110]
显然，附图只是本技术的一些例子或实施例，对本领域的普通技术人员来说，也可以根据这些附图将本技术适用于其他类似情况，但无需付出创造性劳动。另外，可以理解的是，尽管在此开发过程中所做的工作可能是复杂和漫长的，但是，对于本领域的普通技术人员来说，根据本技术披露的技术内容进行的某些设计、制造或生产等更改仅是常规的技术手段，不应被视为本技术公开的内容不足。
[0111]“实施例”一词在本技术中指的是结合实施例描述的具体特征、结构或特性可以包括在本技术的至少一个实施例中。该短语出现在说明书中的各个位置并不一定意味着相同的实施例，也不意味着与其它实施例相互排斥而具有独立性或可供选择。本领域的普通技术人员能够清楚或隐含地理解的是，本技术中描述的实施例在没有冲突的情况下，可以与其它实施例结合。
[0112]
以上所述实施例仅表达了本技术的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对专利保护范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本技术构思的前提下，还可以做出若干变形和改进，这些都属于本技术的保护范围。因此，本技术的保护范围应以所附权利要求为准。