摘要
本发明涉及目标行为识别领域,提供一种目标行为识别方法、设备及介质,该方法包括:构建目标行为识别模型;训练所述目标行为识别模型;利用训练好的所述目标行为识别模型自动完成复杂环境中目标行为识别;所述构建目标行为识别模型,包括:多源特征编码模块对SAR视频和OPT视频进行特征编码,得到结构性特征与纹理性特征;双层协同特征融合模块将所述结构性特征与纹理性特征进行双层协同特征融合,得到多模态融合特征;层次聚合行为解码模块将多模态融合特征进行层次聚合行为解码,得到目标行为类别。本发明构建的目标行为识别模型能够提高目标行为识别能力,增强目标行为识别鲁棒性。
技术关键词
识别方法
融合特征
多源特征
交叉注意力机制
通道注意力机制
解码模块
编码模块
编码器
多模态
视频
前馈神经网络
可读存储介质
处理器通信
存储器
指令
系统为您推荐了相关专利信息
事件识别方法
分布式光纤传感
前馈神经网络
数据
Softmax分类器
风险预警方法
长短期记忆网络
时序特征
多层感知机
数据
生成对抗网络模型
风格迁移方法
联合损失函数
编码器
融合图像特征
多传感器信息融合
识别方法
层次分析法
融合规则
传感器特征