摘要
本发明公开了一种多模态时序健康数据的异常识别方法及系统,本发明包括以下步骤:采集用户的生理数据、医学影像数据、文本数据、语音数据及环境数据;对多模态数据进行清洗、时间对齐和标准化;通过LSTM、U‑Net、ResNet、RoBERTa和EmotionNet分别提取各模态特征;将特征嵌入统一的特征空间,添加位置编码后输入Transformer模型;通过多层编码堆叠结构进行模态间相关性建模,最终通过全连接网络输出健康状态分类结果;本发明支持模态缺失情况下的异常检测,具有较强的鲁棒性和扩展性,广泛适用于健康监测、医疗辅助诊断及个性化健康管理场景。
技术关键词
异常识别方法
多模态
医学影像特征
医学影像数据
前馈神经网络
注意力
梅尔频率倒谱系数
语音特征
时序特征
文本
生理
特征提取模型
模态特征
编码
语音采集设备
物联网传感器
识别系统
系统为您推荐了相关专利信息
特征提取单元
动态模糊神经网络
多模态
监护仪数据
数据采集模块
消防联动控制系统
气体传感器单元
磁致伸缩驱动器
压力监测单元
成像单元
数据交互显示系统
约束优化模型
多模态交互
历史轨迹数据
设备控制指令
音视频
链路丢包率
日志数据库
传输路径
LSTM模型
卫星图像数据
三维风场
编码器
注意力
金字塔网络