一种富媒体数据的立体监测感知方法

本发明公开了一种富媒体数据的立体监测感知方法，包括获取待监测数据，输入至训练好的立体监测感知模型，得到包括态势描述和目标识别结果的感知结果，所述立体监测感知模型包括由数据输入至输出方向依次连接的特征提取模块、特征融合模块、特征对齐模块、大语言模型和特征映射器。本富媒体数据的立体监测感知方法针对不同类型的数据进行监测，有效实现不同模态、不同源域的数据的高维特征融合，实现深度环境立体感知；通过特征提取模块提取特征过程中，既对数据、又对图像进行特征提取，并通过特征融合模块进行浅层和深层的融合，最大程度减少信息损失，获得更加准确的感知结果。