发明名称 一种基于图标脑电控制的数字界面交互方法
摘要 一种基于图标脑电控制的数字界面交互方法,有:图标搜集与处理步骤从多款数字界面搜集图标,运用图形图像处理软件对图标图片处理;获取图标图片的用户计算机功能控制命令步骤包括脑电设备与测试用计算机的通信,测试过程,原始信号离线分析,群组平均脑电信号时域和频域特征的提取和微处理器处理;目标图标图片的脑电信号的时域和频域特征提取步骤;相似度计算和激发目标图标图片的控制指令步骤。本发明是一种基于图标脑电控制的数字界面交互方法,直接采集人对不同图标图片的脑电信号,依据脑电信号的不同实现了图标对数字界面的脑机交互,提高了数字界面的交互效率。
申请公布号 CN103699230B 申请公布日期 2016.08.17
申请号 CN201410016943.3 申请日期 2014.01.14
申请人 东南大学 发明人 薛澄岐;牛亚峰;王海燕;李晶;陈默
分类号 G06F3/01(2006.01)I;G06F3/0481(2013.01)I;A61B5/0484(2006.01)I 主分类号 G06F3/01(2006.01)I
代理机构 江苏永衡昭辉律师事务所 32250 代理人 王斌
主权项 一种基于图标脑电控制的数字界面交互方法,其特征在于,包括以下步骤:步骤1图标搜集与处理:从多款数字界面中搜集i个功能图标图片,i=1、2、……、10,运用Photoshop,Illustrator或Coreldraw图形图像处理软件对图标图片处理,得到像素均为48px*48px的png格式的图标图片,将png格式的图标图片放入面积为1024px*768px的白色背景图片中央,生成文件格式为bmp的图标图片,步骤2获取图标图片的用户计算机功能控制命令:步骤2.1将事件相关电位ERP脑电设备与装载E‑prime软件的测试用计算机连接,以实现事件相关电位ERP脑电设备与装载E‑prime软件的测试用计算机的通信,步骤2.2选取20名被试者,每名被试者对每张图标图片均进行10次重复测试,每张图标图片获得200个测试样本并将200个测试样本组成一个群组,所述测试的过程为:将一张测试图像呈现在被试者的面前并对被试者的视觉形成刺激,使用佩戴在被试者头上的由事件相关电位ERP脑电设备中配置的电极帽以及Scan软件采集被试者对所述一张测试图像的刺激时段的原始脑电信号且采样率为500赫兹,遍历所有单张测试图像,得到被试者对所有测试图像的刺激时段的原始脑电信号,所述一张测试图像的呈现包括提示阶段、图标图片视觉刺激呈现阶段及空屏阶段,在提示阶段,屏幕中央将呈现面积为32px*32px黑色十字叉,呈现1000ms后消失,该阶段被试者需集中注意力;在图标图片视觉刺激呈现阶段,屏幕中央将呈现面积为48px*48px的任一单张图标图片,被试者仔细观察任一单张图标图片,呈现1000ms后消失;在空屏阶段,屏幕呈现白色空屏,呈现时间1000ms,以消除被试者的视觉残留,步骤2.3用Scan软件对原始脑电信号离线分析,所述离线分析包括对各原始脑电信号进行预处理和各群组叠加平均,获取各图标图片的群组平均脑电信号<img file="FDA0000943729730000011.GIF" wi="242" he="86" />为图标图片的群组平均脑电信号的表达通式,表示第i个图标图片的群组平均脑电信号,所述预处理是分别对各个原始脑电信号进行预览和去除眼电伪迹,再对原始脑电信号进行分段提取,得到第i图标图片视觉刺激原始脑电信号y<sub>i</sub>(t),t为采样时间点且t=1000+2m,m为图标图片视觉刺激原始脑电信号的采样个数且m为[1,500]区间上的整数,最后对图标图片视觉刺激原始脑电信号y<sub>i</sub>(t)进行基线矫正及去除伪迹,所 述群组叠加平均是分别对20名被试者的10次测试所得的去除伪迹后的图标图片视觉刺激原始脑电信号y<sub>i</sub>(t)进行叠加平均得到<img file="FDA0000943729730000021.GIF" wi="123" he="87" />步骤2.4分别对各图标图片的群组平均脑电信号<img file="FDA0000943729730000022.GIF" wi="101" he="79" />进行时域和频域特征的提取,所述的时域特征<img file="FDA0000943729730000023.GIF" wi="47" he="84" />包括均值<img file="FDA0000943729730000024.GIF" wi="83" he="86" />绝对平均幅值<img file="FDA0000943729730000025.GIF" wi="90" he="85" />方差<img file="FDA0000943729730000026.GIF" wi="83" he="86" />均方根值<img file="FDA0000943729730000027.GIF" wi="87" he="85" />峰峰值<img file="FDA0000943729730000028.GIF" wi="83" he="87" />波形因子<img file="FDA0000943729730000029.GIF" wi="91" he="87" />峭度因子<img file="FDA00009437297300000210.GIF" wi="62" he="86" />和偏斜度因子<img file="FDA00009437297300000211.GIF" wi="82" he="86" />所述的频域特征<img file="FDA00009437297300000212.GIF" wi="49" he="86" />包括频谱平均振幅<img file="FDA00009437297300000213.GIF" wi="89" he="87" />频谱方差<img file="FDA00009437297300000214.GIF" wi="90" he="85" />第一频谱特征频率<img file="FDA00009437297300000215.GIF" wi="65" he="86" />和第二频谱特征频率<img file="FDA00009437297300000216.GIF" wi="83" he="87" />所述第i个图标图片的群组平均脑电信号<img file="FDA00009437297300000217.GIF" wi="107" he="82" />的时域特征<img file="FDA00009437297300000218.GIF" wi="45" he="82" />中的均值<img file="FDA00009437297300000219.GIF" wi="58" he="87" />为:<img file="FDA00009437297300000220.GIF" wi="838" he="150" />所述第i个图标图片的群组平均脑电信号<img file="FDA00009437297300000221.GIF" wi="102" he="85" />的时域特征<img file="FDA00009437297300000222.GIF" wi="47" he="86" />中的绝对平均幅值<img file="FDA00009437297300000223.GIF" wi="76" he="87" /><img file="FDA00009437297300000224.GIF" wi="869" he="143" />所述第i个图标图片的群组平均脑电信号<img file="FDA00009437297300000225.GIF" wi="103" he="82" />的时域特征<img file="FDA00009437297300000226.GIF" wi="46" he="85" />中的方差<img file="FDA00009437297300000227.GIF" wi="83" he="87" /><img file="FDA00009437297300000228.GIF" wi="494" he="143" />。
地址 210096 江苏省南京市四牌楼2号