摘要
本发明涉及一种基于多模态深度学习的森林火灾蔓延与回溯预测方法,包括以下步骤:数据收集与预处理;使用SwinTransformer图像编码器模块和多头自注意力机制组成的序列编码器模块,对输入数据分别提取空间特征Fspatial和时间特征Ftemporal;利用由交叉注意力机制和前馈层组成的环境引导区域表示学习模块,学习火灾区域与空间环境数据和时间环境数据之间的相关性,结合空间和时间维度生成历史火灾区域的表示;基于历史火灾区域表示A,学习目标火灾区域的时间依赖性,得到目标火灾区域的表示;使用SwinTransformer图像解码器模块,对目标火灾区域表示R进行蔓延预测或回溯预测,输出目标火灾区域T。
技术关键词
多模态深度学习
遥感卫星图像
交叉注意力机制
图像编码器
序列
数据
编码器模块
图像解码器
火灾场景
训练深度神经网络
植被
优化神经网络
分辨率
天气
阶段