摘要
本说明书公开了面向遥感场景非对称跨模态的大模型知识迁移方法和装置,获取训练样本对,一个训练样本对中样本RGB图像和样本MS图像对应同一场景分类,将样本MS图像输入教师模型,确定教师模型从样本MS图像提取出的第一图像特征,确定教师模型根据第一图像特征得到的第一场景分类作为伪标注,将样本RGB图像输入学生模型,确定学生模型从样本RGB图像提取出的第二图像特征,确定学生模型根据第二图像特征得到的第二场景分类,根据第二图像特征与第一图像特征的差异以及第二场景分类与伪标注的差异对所述学生模型进行训练,可降低对训练样本的语义一致性需求,利用更少量的MS训练样本对更多的RGB样本进行训练,提升学生模型性能。
技术关键词
场景分类
学生
知识迁移方法
教师
跨模态
图像匹配
训练样本集
处理器
注意力机制
可读存储介质
模块
存储器
语义
计算机
程序
系统为您推荐了相关专利信息
注意力机制
跨模态
多视角特征融合
图片
节点特征