一种缺失模态下基于提示学习的抑郁风险评估系统

本发明公开了一种缺失模态下基于提示学习的抑郁风险评估系统，包括以下步骤：获取使用者的面部图像和语音；将采集到的数据送入到CPU处理器进行数据处理并保存在该系统的目录下；利用系统中的缺失模态重建模块重建缺失信息；对每个模态应用跨模态的Transformer编码器来融合来自其他模态的信息；将三个模态的数据送入到子注意力融合模块机型多模态融合；利用评估网络预测结果并将结果在显示窗口中打印出来。本发明涉及图像处理领域；该种缺失模态下基于提示学习的抑郁风险评估系统，解决了现有的抑郁风险评估系统在缺失模态下准确率不高的局限性，提高了抑郁风险评估系统的使用范围。