摘要
本发明公开一种基于动态适配的多模态视觉目标跟踪方法,包括构建动态适配的多模态特征提取与融合网络;构建动态桥接融合模块;构建基于低秩适配的参数高效适配机制;构建完整的多模态视觉目标跟踪模型;在服务器等计算设备上对所述模型进行训练,通过降低网络损失函数的总体损失值,优化网络参数,直至网络收敛;利用训练好的视觉目标跟踪模型对待跟踪的视频序列中指定的单个目标进行跟踪;对所述训练好的模型进行性能评估。所述方法通过动态模态融合与高效参数适配机制,实现不同视觉模态信息的自适应集成与统一目标跟踪。
技术关键词
跟踪方法
动态
模态特征
视觉
融合特征
多模态
全局平均池化
图像
描述符
分支
通道注意力机制
优化网络参数
高维特征向量
模块
补丁
系统为您推荐了相关专利信息
排布控制方法
熔池熔炼炉
动态控制系统
延长设备寿命
内衬耐火砖
双孢菇
轻量化卷积神经网络
三维点云数据
力控闭环系统
强化学习模型
手眼标定方法
人形机器人
特征点
深度相机
生成三维点云