基于多模态感知的隧道路面抛洒物预警方法

本发明涉及隧道安全管理技术领域，特别是涉及基于多模态感知的隧道路面抛洒物预警方法，包括：获取目标隧道路面的多模态数据；对可见光图像进行特征提取，获取抛洒物的特征信息；将三维点云数据输入LSTM网络，获取抛洒物短期内的空间位移；构建ST‑GNN网络，将抛洒物短期内的空间位移输入ST‑GNN网络，获取增强时空特征向量；将可见光图像和热辐射图像输入Transformer网络，获取长期分布热图特征；结合增强时空特征向量和长期分布热图特征，获取抛洒物的时空分布预测结果；根据多模态数据和抛洒物的时空分布预测结果，获取隧道交通风险预警结果。本发明能够提供及时有效的预警信息。