基于多模态信息和AI的大模型调优方法及系统

本发明提供基于多模态信息和AI的大模型调优方法及系统，涉及人工智能技术领域，包括通过提取多模态参数特征及交互特征，动态调整贡献系数实现特征迁移得到跨模态融合向量；采用对抗机制将模态特征对齐获得域不变特征；基于模态置信度构建提示链，并利用AI强化学习优化该提示链，迭代至收敛得到优化结果；最终更新大模型参数。本发明实现了多模态信息的有效融合，提高了人机交互大模型的调优效果和泛化能力。