摘要
本发明公开了一种基于多模态大模型的自适应海岸线边缘检测方法,具体涉及遥感图像处理和计算机视觉技术领域,基于DirectSAM模型架构,引入文本编码器与多模态融合模块,提出遥感领域可接受文本提示的多模态边缘检测大模型DirectSAM‑RS;构建由遥感图像‑文本‑边缘三元组组成的大规模预训练数据集RemoteContour‑34k;利用RemoteContour‑34k数据集对DirectSAM‑RS模型进行多模态预训练,实现自然图像到遥感图像的领域适配,为遥感领域下的海岸线边缘检测任务微调提供基础;在海岸线边缘检测数据集上对多模态边缘检测大模型进行微调,优化模型对海岸线的边缘检测能力。
技术关键词
边缘检测方法
文本编码器
高分辨率遥感图像
融合特征
语义
三元组
注意力
数据
标签
遥感图像处理
文本规范化
计算机视觉技术
多模态信息
多模态特征
多级特征
上采样
系统为您推荐了相关专利信息
线性回归模型
大语言模型
溯源方法
文本
生成答案
全卷积神经网络
医学图像分割方法
条件随机场模型
多尺度特征融合
上采样
深度学习网络模型
领袖
预训练语言模型
商业
分析方法