一种基于多模态大模型的政务数字人动态交互方法及系统

本公开的实施例提供了一种基于多模态大模型的政务数字人动态交互方法及系统。应用于政务智能服务技术领域，所述方法包括：获取政策公告文本，进行清洗与结构化处理，得到结构化政策数据集。提取旧、新政策数据，进行差异比对并标记关键变动字段，生成政策变更数据。对变更数据进行摘要和要素抽取，形成结构化语义片段，增量嵌入政策知识图谱。基于更新知识图谱生成问答对样本，对多模态大模型进行自监督微调训练。用户输入多模态数据，模型生成政务应答并反馈。本方案可以使多模态大模型持续保持最新政策知识；使模型在理解文本、语音、图像等多模态输入的同时，生成精准且上下文一致的政务应答，提升政策解读的时效性、准确性与交互体验。