摘要
本发明涉及一种用于脑卒中康复诊断的多模态置信度动态交互融合方法,属于脑卒中康复智能诊断技术领域。其包括以下步骤:获取脑卒中患者康复训练多模态数据并构建数据集,经预处理后输入置信度生成网络,得到不同模态置信度特征;将特征输入多模态置信度特征联合模块,构建全特征矩阵,计算欧氏距离以添加空间信息,再经两层卷积提取跨模态关联特征,输出最终全特征矩阵;同时,在多模态置信度协同矫正模块中,结合正确标签置信度计算矫正矩阵,并利用余弦相似性、线性投影特征等,得到最终矫正矩阵;将两模块输出延展拼接后,输入全连接网络得到诊断结果,并通过损失函数与真实结果计算损失,进行训练优化。本发明能提高脑卒中康复诊断的准确率。
技术关键词
融合方法
矩阵
矫正
患者康复训练
数据
动态
投影特征
注意力
多模态
跨模态
智能诊断技术
文本
音频
网络
卷积模块
视频
标签
线性
专业
系统为您推荐了相关专利信息
三维激光扫描仪
地铁隧道病害
智能探测传感器
数据采集系统
激光测距传感器
可视化子系统
人机协同
微型计算机
无线通信技术设备
图像