摘要
本发明提供了一种脑电与图片联合编码实现手部精细动作运动想象的方法,预设脑电预训练模型并训练,分析用户观看视频期间的注意力,得到用户期望抓取的目标物体对应的目标图像,提取出目标图像的嵌入向量;采集用户观看视频期间想象采用预设的多种手部精细动作抓取目标物体时的脑电信号,通过脑电预训练模型中训练后的脑电编码器对脑电信号进行编码,得到脑电信号的嵌入向量,将目标图像和脑电信号各自对应的嵌入向量进行拼接并进行面向预设的多种手部精细动作的脑电信号解码,将手部精细动作运动想象直接映射到操控五指灵巧手上。本发明为基于无创脑机接口技术解码手部精细动作运动想象帮助功能受损的用户自如地操控五指灵巧手抓取物体。
技术关键词
脑电信号采集设备
编码器
图片
解码器
运动
五指灵巧手
图像
坐标
注意力
柱状物体
视频帧
预训练模型
多层感知机
抓取物体
系统为您推荐了相关专利信息
浮选泡沫图像
图像分割模型
特征提取方法
样本
特征提取模块
联动控制系统
肌电传感器
主控模块
踝泵运动训练仪
角度传感器
车辆避障方法
运动轨迹预测
车辆行驶环境
障碍物
风险量化评估