摘要
本发明涉及多模态学习,半监督学习和情感计算技术领域,具体是一种基于循环数据蒸馏的多模态半监督学习方法及装置。该方法及装置利用多个单模态预训练模型,通过置信度增强伪标签模块,从大量无标签数据蒸馏出可靠、具类别代表性的数据来训练多模态情感识别模型,并提供性能反馈继而更新所有单模态模型。它以循环互利的方式联合训练多模态情感识别模型和单模态模型,最终获得有效的多模态情感识别模型。
技术关键词
半监督学习方法
无标签数据
标签模块
多模态情感识别
学生
教师
蒸馏
训练集
情感计算技术
情感识别模型
数据获取单元
预训练模型
计算机程序产品
处理器
数据分布
电子设备