摘要
本发明涉及人工智能技术领域,可应用于金融科技及医疗健康等业务场景中,公开了一种基于多模态信息的分析方法、装置、设备及介质,包括:获取目标对象的视觉信息、声音信息和生理指标信息;对多模态感知信息进行预处理,生成标准多模态信息;提取面部表征特征、行为表征特征、语音表征特征和生理表征特征;基于所述多维度特征生成目标对象的状态表征;将状态表征与预设参考基准进行比对,生成状态差异结果;根据状态差异结果生成分析结果。本发明通过融合多模态感知信息并提取多维度特征,构建状态表征并进行差异分析,使分析结果具备可量化、可比对等特性,提升了评估的客观性与准确性。
技术关键词
多模态信息
生理
分析方法
特征提取模块
对象
注意力
情绪状态信息
视觉
语音特征提取
指标
韵律模式
统计学特征
面部关键点
心率变异性参数
高清图像传感器
多维度特征提取
情感倾向分析