摘要
本发明公开了一种结合大语言模型知识蒸馏的伪造信息检测方法,包括有S1图像文本特征预处理;S2大语言模型预测;S3特征聚合;S4知识蒸馏;通过计算大语言模型预测的标签和真实标签的交叉熵损失,为大语言模型生成的依据赋予权重,通过将带权重的依据特征和图像文本特征聚合输入到小语言模型分类器中,实现最终的分类。
技术关键词
大语言模型
信息检测方法
教师
学生
蒸馏
分类器
文本编码器
标签
图像编码器
数据
网络
系统为您推荐了相关专利信息
遥感图像数据
卷积模板
教师
蒸馏
遥感图像场景分类
命名实体识别方法
大语言模型
注意力机制
前馈神经网络
文本