摘要
本发明提供的基于多模态数据的员工情绪指数评测方法以及装置,包括:采集员工多模态的相关数据;所述相关数据包括员工的语音数据、企业通讯工具中的文本数据、视觉行为捕捉的视频数据以及员工的生理信号;对所述相关数据进行特征提取并进行跨模态对齐,得到多模态技术特征;计算各个模态的数据质量系数以及场景关联度系数,以计算各个模态的最终动态权重;基于各个模态的最终动态权重对多模态技术特征进行融合,并进行分析得到所述员工的综合情绪指数;所述综合情绪指数包括情绪倾向、情绪强度、压力指数。在本发明中,通过对多个模态的数据进行综合分析得到员工的综合情绪指数,克服当前员工的情绪评测不够全面以及准确性低的缺陷。
技术关键词
评测方法
员工
指数
数据
多模态技术
通讯工具
团队
语音
跨模态
场景
文本
生理
动态
面部微表情
BERT模型
温湿度参数
视频
评测装置
系统为您推荐了相关专利信息
笔画
校准方法
信号特征
信道状态信息
注意力机制
多模态特征融合
阿尔茨海默症
诊断方法
基因
残差神经网络
船舶舾装件
三维重建方法
纹理特征
卷积网络特征提取
高精度三维模型
监测点
周期管理方法
混凝土构件
内填混凝土
BIM建模软件