摘要
本申请公开了一种基于辅助语言增强的遥感图像描述生成方法,具体涉及计算机视觉处理的领域。分别提取遥感图像的高层语义特征和深层语义特征;基于高层语义特征,提取固有视觉特征;对深层语义特征和固有视觉特征进行融合,得到共享视觉特征;将共享视觉特征输入预训练的语言生成器中,得到遥感图像的文本描述;其中,语言生成器的构建方法包括:分别构建目标语言生成器和辅助语言生成器;对目标语言生成器和辅助语言生成器进行权重交互,得到语言生成器。辅助语言生成器辅助语言能够有效补充目标语言生成器的训练数据,并提供多样化的语言表达形式,进而提高文本生成器对上下文的感知能力,进一步提高生成的语言描述的准确性。
技术关键词
高层语义特征
视觉特征
生成方法
融合特征
图像
残差网络
特征提取模块
文本生成器
参数
计算机视觉
注意力机制
生成装置
像素
元素
通道
因子
系统为您推荐了相关专利信息
业务流程信息
生成方法
序列标注模型
双向长短期记忆
条件随机场
三维剂量预测方法
节点特征
神经网络模型
剂量预测系统
计划
工程量计算方法
数字孪生模型
深度学习模型
路面坑槽识别方法
神经网络单元
桥梁结构
损伤识别方法
钢筋试件
预测误差
钢筋混凝土界面
图像处理模型
可见光波段
样本
模型训练方法
数据