摘要
本发明公开一种基于多模态生理信号与自适应反馈的动态情绪交互系统,包括多模态生理信号识别与对齐模块、跨模态融合模块、自适应反馈机制模块、情感分类模块以及动态反馈机制模块,利用预训练的大型多模态语言模型进行情感识别,利用自适应门控机制和图注意力网络进行特征的动态融合和模态权重的调整,增强情感推理与互动。此外,自适应反馈机制利用AGDF模型,对Emotion‑LLaMA模型引入特征解耦和动态融合,实现情感识别和互动的实时优化,使其能够有效平衡不同模态的独有信息与共有信息,同时实现实现精细化特征交互,显著提高了复杂场景下的情感识别准确率,并有效提升了情感交互的自然性与个性化。
技术关键词
多模态生理
情绪交互方法
模态特征
交互系统
动态反馈机制
非暂态计算机可读存储介质
情感类别
注意力机制
对齐模块
跨模态
信号
情感分类模型
视觉特征
文本
语音
标签