多模态混合专家心理健康测评系统、方法、介质及设备

本发明属于多模态数据处理领域，为解决现有的混合专家模型在多模态场景下因模态间动态交互不足而导致的特征融合效率低的问题，提供多模态混合专家心理健康测评系统、方法、介质及设备。其中，多模态混合专家心理健康测评系统包括多模态数据获取模块；及自适应分组模块；及交叉注意力融合模块，用于提取基础组和辅助组中的对应模态数据的特征，对各组的特征分别进行组内交叉注意力融合，生成组内特征；通过跨组交叉注意力机制对所有组内特征进行全局信息融合，得到跨组特征；将跨组特征、组内特征及多模态数据原始特征进行拼接后，经门控网络得到动态门控权重。其能够为心理医生提供更加准确的指导意见。