多模态光电信息融合的农田监测方法、装置、设备及介质

本发明涉及一种多模态光电信息融合的农田监测方法、装置、设备及介质，属雷达与视频信息融合下的农田监测技术领域。该方法以固定点雷达与多目摄像机配合筛选追踪目标并构建其连续轨迹，在构建时以附加门改进的长短时记忆网络补充丢失轨迹，再以无人机抵近追踪目标拍摄跟踪图像后将同时刻下的跟踪图像与连续轨迹以加性注意力机制融合，基于相邻两时刻融合特征的相似度对比实现目标逐步跟踪并识别。本发明结合改进的长短时记忆网络与注意力机制强化方法，对多模态光电信息融合利用，以多源数据确定追踪目标，并以相邻刻融合特征对比逐步确定目标位置，可有效提升目标检测、追踪以及分类的精准度与实时性，实现农保场景下目标的高准确度识别告警。