摘要
本公开提供了一种基于多模态时间序列数据的房树人测验分析方法及装置,涉及数据处理技术领域。该方法包括:获取目标对象在进行房树人测验过程中产生的多模态数据;基于时间序列对多模态数据进行特征提取,得到多模态特征;对多模态特征进行拼接,得到拼接向量;基于拼接向量计算跨模态一致性得分,并与拼接向量融合得到特征融合数据;对特征融合数据进行分析,得到分析结果。本公开实施例,通过对房树人绘画过程中的多模态数据的时间序列采集,针对房树人测验的结构和分析要点,识别并编码绘画过程中不同元素的时序数据,以综合分析受测者的绘画顺序、布局、符号特征等,跨模态地验证测验结果,提升测验分析的全面性、效率与客观性。
技术关键词
生理特征信息
情绪特征
分析方法
静态特征提取
数据
多模态特征
笔迹信息
动态特征提取
绘画
跨模态
序列
时间同步
时序
视频
特征提取模块
无监督学习方法
交叉注意力机制
音频