摘要
本发明涉及一种个性感知的驾驶员多模态情绪识别方法,属于车联网技术领域,包括以下步骤:S1:采集驾驶员视觉、音频和文本数据并进行显性三模态特征提取;S2:对三模态数据进行隐性个性化特征提取;S3:将驾驶员的显性三模态特征和个性化特征进行融合;S4:对情绪进行分类。本发明实现了高效准确识别车联网中驾驶员的驾驶情绪。
技术关键词
多模态情绪
个性化特征
融合特征
样本
模态特征
识别方法
注意力
驾驶员面部表情
音频特征
文本
人脸检测器
面部表情特征提取
特征提取网络
路边单元
Sigmoid函数
情绪识别系统
视觉特征提取