基于语音大模型的情绪识别方法、装置、设备及介质

本发明涉及人工智能技术领域，公开了一种基于语音大模型的情绪识别方法、装置、设备及介质，应用于医疗领域的病人情绪识别场景中，其中，方法包括：获取语音片段信息和语音片段信息对应的文本描述信息；将语音片段信息和文本描述信息进行特征编码和特征对齐，生成联合特征，通过联合特征对预训练语音大模型进行自监督训练，生成初始语音大模型；收集语音指令对，对将初始语音大模型进行模型微调得到微调后语音大模型；获取带有多样化情绪标签的语音信息，对微调后语音大模型的目标函数进行优化，生成目标情绪识别模型；获取待识别语音片段信息，并基于目标情绪识别模型进行情绪识别，得到情绪识别结果。本发明提高了情绪识别的准确性。