摘要
本发明提供一种动态路由结合非对称多窗口的多模态显著目标检测方法,属于图像处理领域。步骤如下:S1:利用两个并行神经网络分支处理可见光与热红外图像对,形成各层可见光与热红外特征图;S2:使用不同尺寸窗口划分,获取不同层大特征图与小特征图;S3:应用动态路径选择策略获取加权聚合后的高层特征,获取全局特征并获得不同层增强后的特征;S4:获得对齐后的不同层特征;S5:结合可见光与热红外特征图的第零层,获得预测的显著性图。本发明动态选择并加权不同层特征,利用视觉注意机制针对未对齐显著区域不同模态相关性进行多尺寸窗口建模,克服了RGBT显著性目标检测中数据集需要对齐的问题,且预测性能优越。
技术关键词
多窗口
动态
上采样
并行神经网络
可见光图像
多尺寸
层级
图像处理
语义
多模态
分支
标记
视觉
策略
机制
模块
数据
系统为您推荐了相关专利信息
多尺度特征提取
边缘检测算子
编解码结构
无人机航拍影像
铁轨
聚焦方法
图像
神经网络模型
计算机视觉技术
深度学习框架
动态优化调度方法
智能电网巡检
染色体
列表
任务分配执行