一种基于多模态的题目知识点标注方法及系统

本发明公开了一种基于多模态的题目知识点标注方法及系统，包括：获取教育领域的原始数据，其中，所述原始数据来自于物理实体；对所述原始数据进行清洗和增强处理，得到增强后的训练数据；基于增强后的训练数据，通过构建差异化数据建立多样化的模型偏好，并利用协同注意力机制和门控机制融合文本和视觉特征进行推理，得到多模态推理结果；根据所述多模态推理结果，进行集成预测，得到题目知识点标签。本发明通过构建差异化数据来建立多样化的模型偏好，引入的共同注意机制和门控机制，增强跨模态信息的交互，使模型能够更有效地融合文本和视觉特征，提高了知识点标注的准确性和适用性。