基于大语言模型的多模态文档结构化处理与知识提取方法

本发明公开了一种基于大语言模型的多模态文档结构化处理与知识提取方法，S1、接收输入的多模态文档；S2、对所述多模态文档中的文本数据进行预处理；S3、对所述多模态文档中的非文本数据进行特征提取；S4、将预处理后的文本数据与特征提取后的非文本数据进行多模态数据融合；S5、通过预先训练的改进BERT模型对所述融合后的多模态数据进行深度语义分析，包括关键实体识别、关系抽取及事件检测；S6、基于所述深度语义分析的结果，自动化地将提取的信息构建知识图谱；S7、将知识图谱的数据输出为可供分析或应用的格式。本发明实现了对非结构化和多模态文档的结构化处理和知识提取。