摘要
本发明涉及多模态模式识别技术领域,尤其涉及一种基于模态交替优化的多模态谣言检测方法,包括构建并利用训练数据集DS训练模态交替优化的多模态谣言检测模型,所述多模态谣言检测模型采用分阶段训练策略,包括在特定训练阶段仅对目标优化模态的神经网络通路进行参数更新,冻结其余模态的对应网络参数,并动态调整超参数以调控不同模态的训练进度,在特定训练阶段和非特定训练阶段转换时,通过参数重要性评估固定多模态融合分类器中历史任务关键参数;将待检测样本输入到已训练完毕的多模态谣言检测模型中,输出对应样本的真实性概率分布。本发明能解决现有多模态谣言检测技术中存在的模态惰性问题,从而实现不同模态贡献度的均衡优化。
技术关键词
融合分类器
谣言检测方法
多模态
模态特征
社交
图像编码器
情感特征
阶段
文本编码器
融合图像特征
统计特征
交叉注意力机制
数据
文本分类器
图像分类器
BERT模型
参数
系统为您推荐了相关专利信息
多模态图像配准
神经网络模型
通用特征
配准多模态图像
图像配准方法
多模态对话
音频
视觉
情感识别方法
文本特征向量
非侵入性监测
单细胞转录组
生物材料
荧光强度变化检测
非线性光学技术
交互模型
矿井
图像局部特征
特征提取方式
大语言模型