一种基于细粒度分层语义融合的注意力状态分析方法、系统、装置及存储介质

本发明公开了一种基于细粒度分层语义融合的注意力状态分析方法、系统、装置及存储介质，方法包括获取目标对象的多模态图像数据；将多模态图像数据输入预先训练好的特征提取映射模型，经过分层提取得到各模态的细粒度语义特征；其中，特征提取映射模型包括表情细粒度特征提取模块、头部姿态细粒度特征提取模块和眨眼细粒度特征提取模块；将各模态的细粒度语义特征输入预先训练好的特征融合模型进行多模态特征融合，得到最终融合特征；基于最终融合特征，通过预先构建好的注意力状态预测模型得到目标对象的注意力状态分析结果。本发明通过融合多模态细粒度特征显著提高了对注意力状态分析的准确性和可靠性。