基于改进多模态Transformer模型的输变电工程开工评价方法及系统

一种基于改进多模态Transformer模型的输变电工程开工评价方法及系统，方法首先获取包含文本与图像的多模态数据，然后基于互信息方法筛选出相关的特征，构建最终优化特征集；接着添加跨模态自注意力层对Transformer模型进行改进，并基于跨模态自注意力机制，融合文本和图像，最后将多模态融合特征输入至改进的MLP模型中，筛选合规项目；本发明利用互信息法从多模态数据中筛选与开工条件高相关的特征，减少了冗余，提升了数据处理和分析的精度，而跨模态自注意力机制实现了文本与图像特征信息交互，保证多源数据处理的有效性，并通过动态阈值调整机制应对特征差异与信息不均衡，最终通过改进多层感知机筛选合规指标，确保了评分的准确性。