摘要
本发明涉及面部表情分析技术领域,尤其涉及一种混合专家多模态情绪理解方法,其通过预设混合专家多模态情绪理解模型得到情绪理解结果。其中,预设混合专家多模态情绪理解模型包括依次相连的输入模块、混合专家压缩器和输出模块,混合专家压缩器包括情绪专家、通用专家和门控网络。本发明通过情绪专家处理情绪分析,通过通用专家处理通用任务,利用门控网络根据具体情况动态分配情绪专家与通用专家的权重,平衡情绪与通用任务的特征权重分配,解决了多任务情绪理解中的灾难性遗忘问题,实现了情绪理解与通用任务的平衡。
技术关键词
多模态情绪
压缩器
输入模块
输出模块
关键帧
情绪特征
编码
注意力机制
输出特征
面部表情分析
多阶段
网络
理解系统
人脸
数据获取模块
线性
程序
处理器
系统为您推荐了相关专利信息
自动化生成系统
交互式图标
语义向量
风格
噪声图像
图像超分辨率方法
超分辨率模型
注意力
计算机程序指令
前馈神经网络
贡献率
红树林
稳定同位素分析
数据输出模块
数据输入模块
动力电池
汉明距离
车辆
风险预警方法
历史运行数据