一种基于多模态火灾救援检测方法和系统

本发明适用于计算机技术领域，提供了一种基于多模态火灾救援检测方法和系统，该方法包括：获取救援区域采集的相关信息，进行多模态特征提取，选择多模态特征融合；将先验信息通过反卷积以及上采样操作，输出目标位置搜索提示；将火势温度分布特征Fuc与标定好的温度量程相乘得到下一时刻的实际温度，以辅助救援；本发明结合了语音特征、红外特征以及视觉特征，并进行了充分的特征融合，提高检测识别被困者位置信息的准确率以及召回率；同时音频的模态加入，可以避免因为建筑遮挡物以及烟雾等原因导致视觉模态无法探测的局限性，使得检测效果更加鲁棒。