摘要
本申请公开了一种基于脑眼融合和迁移学习的互动式学习优化方法及系统,包括如下内容:采集不同受试者的脑电数据和眼动数据;对脑电数据和眼动数据进行预处理,得到脑电样本和眼动样本,进行数据配对;使用卷积神经网络结合多头注意力结构自动提取脑电样本和眼动样本中的脑电特征向量和眼动特征向量,通过全连接层将脑电特征向量和眼动特征向量融合为最终的特征向量;针对不同受试者之间的数据差异,构建迁移学习模型;根据用户的瞳孔大小、停留时间结合脑电数据,重新训练识别得到针对不同内容的情感分类。本申请基于多模态数据融合和迁移学习,将脑电信号与视觉信号等多种生理数据进行融合,克服传统单一信号分析在复杂场景下的局限性。
技术关键词
学习优化方法
深度神经网络
迁移学习模型
样本
线性变换矩阵
多模态数据融合
数据分布
多头注意力机制
多尺度特征
眼动数据
带通滤波器
对齐模块
标签
信号分析
数据同步
识别模块
视觉
系统为您推荐了相关专利信息
预训练语言模型
种子
网络模型训练
业务数据构建
计算机可读指令
异常检测方法
宽度学习系统
参数优化算法
广义
变量
运动控制系统
巡检机器人
机械臂控制方法
样本
插件接口
物体
图像识别模型
粒度检测方法
生成训练样本
形态