基于多模态动态融合大模型与智能体协同的动态交互方法

本发明公开了基于多模态动态融合大模型与智能体协同的动态交互方法，包括：对用户语音信息进行特征提取得到语音编码向量、文本语义向量以及情感特征向量；通过多模态动态融合大模型对语音编码向量、文本语义向量以及情感特征向量进行动态权重特征融合得到融合特征向量；将融合特征向量输入到意图‑场景耦合网络，识别得到用户意图标签；根据用户行为日志识别得到用户画像标签，将用户意图标签和用户画像标签输入到自主决策智能体，通过轻量级策略网络生成目标决策动作，进而根据目标决策动作与用户进行交互。本发明提高了客服系统智能交互的效率和准确性，也提高了用户的交互体验，可广泛应用于人工智能技术领域。