摘要
本申请公开了一种智能终端多模态情感分析方法、设备和服务器,属于计算机领域。该方法包括:在智能终端侧,获取文本、语音和生理信号等多模态数据并提取特征;通过模态内自适应注意力和跨模态双向注意力计算,生成融合特征向量;基于该向量确定情感类别与强度,并生成包含模型参数更新和知识子图的本地更新。所述本地更新被发送至一联邦聚合服务器,该服务器基于从多个终端接收的更新构建一全局知识图谱,并生成一全局模型。终端接收该全局模型以更新本地模型。本申请旨在解决现有技术中情感分析存在隐私泄露风险、多模态融合不准确及模型适应性差的问题,达到了在保护用户隐私的同时,显著提升情感分析准确性和个性化适应能力的技术效果。
技术关键词
情感分析模型
双向注意力
智能终端设备
情感类别
跨模态
多模态
服务器
保护用户隐私
知识图谱构建
参数
文本
特征提取模块
强度
语音
数据