一种基于多模态对齐的智能心理状态评估方法及系统

本发明公开了一种基于多模态对齐的智能心理状态评估方法及系统，涉及心理评估技术领域，其中所述的方法包括如下步骤：S1：构建心理状态评估模型的训练样本集；S2：对训练数据样本集中的视频数据、语音数据和文本数据进行预处理；S3：利用多模态交叉注意力，以文本数据为主要模态，以视频数据和语音数据作为文本数据的辅助进行对齐和融合，得到用于心理状态分析的多模态融合特征；S4：利用对齐和融合后的多模态融合特征训练得到心理状态分析模型；S5：通过训练得到的心理状态分析模型获得受测者多维度心理分析结果。本发明的方法，通过预训练大模型提取青少年的多模态深层特征，利用模态对齐技术提高数据的特征表达能力。