摘要
一种融合脑区动态路由与频空语义的言语想象解码方法,包括步骤:构建脑区感知标记路由模块,区域类标记生成单元根据功能脑区生成包括脑区类标记和全局类标记的类标记;区域感知注意力单元用于控制类标记间的交互,并通过构建多头注意力机制输出类标记特征表示;门控专家网络单元接收类标记特征表示,通过稀疏门控机制,输出融合特征;脑区感知分类单元根据融合特征,输出类别预测;构建频空语义特征模块,包括:异质特征专家选择单元,将融合频谱‑空间特征沿通道维度划分为多个分组并选择权重,然后分别送入稀疏门控的混合专家模块进行建模后输出拼接特征;频空语义分类单元,根据拼接特征,输出分类结果;将类别预测和分类结果进行加权融合。
技术关键词
解码方法
融合特征
标记特征
多头注意力机制
网络单元
语义特征
动态
特征提取单元
掩码矩阵
模块
分类器
通道
异质
样本
非线性