摘要
本发明涉及多模态时序数据处理技术领域,具体涉及一种多尺度多模态融合的时序序列分类模型,包括:对输入的多模态时序数据进行时间戳统一、缺失值填充与归一化处理,生成标准化数据;分别采用时序卷积网络与一维卷积网络提取长周期与短周期特征,并进行特征对齐与融合;通过交叉注意力与门控机制实现跨模态动态耦合,结合自适应阈值滤波进行特征降噪;基于多层级特征划分和通道注意力机制完成特征加权融合,生成综合时序特征向量;最终经非线性特征增强、Softmax概率预测、滑动窗口平滑处理及多数投票,输出与时间戳对齐的分类结果。本发明具有特征细粒度高、跨模态融合效果好等优点,适用于智能制造、行为识别、医疗监测等领域。
技术关键词
时序特征
多模态
跨模态
周期
耦合特征
多尺度
多层级特征
动态门控
通道注意力机制
滑动时间窗口
时序数据处理技术
非线性特征
序列
滑动窗口
Softmax函数
一维卷积神经网络
系统为您推荐了相关专利信息
系统故障预警方法
交叉注意力机制
无人平台
柴油机滑油
多模态传感器
姿态特征
电子病历数据
多模态数据采集
动态
语音
慢性淋巴细胞白血病
药物组合物
细胞周期阻滞剂
劳拉替尼
色瑞替尼
子模块
个性化学习路径
策略
蒙特卡洛树搜索
Dijkstra算法
模型训练方法
文本编码器
信号处理模块
谐波
解码器