摘要
本发明涉及语言处理技术领域,具体涉及用于自然语言处理的多模态情感分析方法,包括获取用户输入的多模态数据,包括文本序列、语音波形和面部表情图像;对所述文本序列进行上下文感知分词处理,生成包括词性标签和句法依存关系的结构化文本特征;将所述语音波形和面部表情图像输入非对称噪声抑制模块,分别输出去除环境噪声的纯净语音频谱和消除光照干扰的标准化表情动作序列;将所述结构化文本特征、纯净语音频谱和标准化表情动作序列输入动态关联融合模块,通过跨模态注意力机制生成时间对齐的联合情感表征向量,采用分层决策网络输出情感分类结果。本发明实现了多层次情感理解与分类,提高了情感分析系统对复杂、细腻情绪状态的识别能力。
技术关键词
情感分析方法
句法依存关系
自然语言
序列
噪声抑制模块
跨模态
短时傅里叶变换
Retinex理论
噪声语音
注意力机制
光照
训练词向量模型
波形
图像
文本特征向量
标签
面部关键点
系统为您推荐了相关专利信息
识别置信度
斯塔克尔伯格博弈
分拣控制方法
区域控制器
分拣控制系统
温控设备
数据异常监控
预测系统
经验模态分解算法
注意力机制
组合系统
后滤波系统
鲁棒性
天线相位中心
GNSS天线
手语识别翻译
大语言模型
问答方法
预训练模型
序列
漏洞
软件
时间预测模型
可读存储介质
存储计算机程序