摘要
本发明的一种无人机图像水滴的去除与优化方法及装置,属于无人机技术领域,方法包括步骤:收集包含附着水滴图像和干净图像的数据集,并进行标注构建指令微调数据集;设置提示词,并对多模态大模型进行优化训练;将图像输入训练后的多模态大模型,得到图像描述,提取图像描述中关键视觉元素并将其转换为数字化表示的信息向量;设计基于附着水滴物理模型和对抗训练的图像附着水滴去除算法,获得图像恢复模型,对图像进行精细化调整和泛化能力提升;基于多模态大模型的信息向量对图像恢复模型的恢复结果进行优化,并利用优化图像恢复模型进行无人机图像水滴的去除与优化处理。本发明提高了无人机的自主导航、避障能力和任务执行能力。
技术关键词
图像
多模态
指令
数据
退化物理模型
路径规划功能
生成对输入
视觉
优化装置
生成对抗网络
解码器结构
样本
恢复算法
元素
模块
无人机技术
训练集
硬件系统
系统为您推荐了相关专利信息
并行训练方法
神经网络参数
分支
神经网络训练
数据
牙菌斑检测装置
牙刷支架
手持柄
检测终端
图像采集模块
人体关键点检测
视觉传感器
图像
车辆尾门控制装置
卷积模型
图形操作界面
代码系统
子模块
多用户协作
关系型数据库