摘要
本发明提出了一种基于多模态情感计算的精神健康风险预警与干预系统,属于精神健康分析领域,包括多模态融合模块,用于获取多模态数据,对多模态数据进行约束和融合,生成融合的情感特征;风险预测模块,用于根据融合的情感特征通过双阶段累积风险预测算法计算精神健康风险概率和情感状态,并基于情感状态进行精神健康风险预警;策略推荐模块,用于基于融合的情感特征和精神健康风险概率提取情感轨迹特征,并进行干预策略推荐,得到当前精神健康风险的干预策略。本发明通过多模态融合模块、风险预测模块和策略推荐模块同时处理视频、音频、文本和生理四种模态数据,准确建模了精神健康风险的非线性累积过程,提高了风险预警与干预能力。
技术关键词
多模态
风险
轨迹特征
交互特征
双线性池化
策略
负荷
音频特征
模态特征
融合情感特征
皮肤电导数据
标识符
分支
面部表情特征
文本
生理
双曲正切函数