基于图像与文字的多模态识别算法

本发明公开了基于图像与文字的多模态识别算法，适用于文物的状态监测与保护。该算法通过同步采集文物的图像信息和文字描述，利用去噪与OCR技术对数据进行预处理，生成标准化的图像和文字特征向量。然后，采用颜色、形状和纹理特征提取算法对图像进行多维特征提取，并通过多模态特征融合算法将图像与文字特征进行加权融合，生成综合特征向量。结合历史状态数据，基于深度学习模型对文物的当前状态进行评估，生成状态评估值和恢复指标，并通过反馈机制自动调整采集参数，优化数据采集流程。本发明能够实现文物状态的实时动态监测、智能化修复建议生成以及文物保护效果的优化，具有较强的适应性和广泛的应用前景。