摘要
本发明公开了一种基于多模态特征融合的光场显著目标检测方法,该方法使用训练后的光场显著目标检测模型检测得到光场多模态图像的显著图;该模型通过切片交织增强模块以局部的方式增强焦点切片间的特征,获得增强后的焦点流特征,通过高层特征融合模块以局部和全局的方式对高层多模态语义信息进行特征融合,输出得到融合后的高层特征图,通过低层交叉注意力以交叉增强的方式对低层多模态的空间‑通道特征进行融合,输出得到融合后的低层特征图,最后,通过紧凑金字塔细化模块对上述特征进行聚合,并解码为精确的显著图。本发明通过构建光场显著目标检测模型,解决了焦点堆栈中切片间特征学习不充分以及光场中多模态信息特征融合不充分的问题。
技术关键词
多模态特征融合
聚焦特征
焦点
切片
模块
金字塔
多尺度特征
混合结构
上采样
图像
滑动窗口
通道
交通
注意力机制
双线性
矩阵
级联
语义
系统为您推荐了相关专利信息
输液系统
液滴检测
重力
ESP8266芯片
集成触摸检测
分布式光纤传感
动态监测方法
物理
趋势预测模型
动态权重分配
机器人控制方法
阶段
机器人控制系统
可读存储介质
网络
生物识别功能
通道闸
生物传感器阵列
生物特征数据
多模态生物特征