摘要
本发明提供了一种面向密集架复杂背景的目标关联方法、装置、设备及介质,涉及计算机技术领域,该方法包括对环境图像数据进行特征提取,得到视觉特征向量,并将环境图像数据输入到视觉语言大模型中得到语义特征向量,通过长短期记忆网络对机器人相对于目标的运动数据进行特征提取,得到运动特征向量,环境图像数据包括目标的目标空间位置;通过特征融合网络将视觉特征向量、语义特征向量和运动特征向量进行特征融合得到语义增强特征向量;利用动态时间规整算法得到目标的目标匹配轨迹,根据目标匹配轨迹通过卡尔曼滤波预测目标的目标预测位置;根据目标空间位置和目标预测位置得到目标关联轨迹。本发明能够提升目标关联的关联精度。
技术关键词
环境图像数据
语义
动态时间规整算法
视觉
特征融合网络
注意力机制
轨迹
长短期记忆网络
卡尔曼滤波
特征提取算法
运动
机器人
关联装置
存储计算机程序
特征提取模块
数据获取模块
时序
序列
处理器
系统为您推荐了相关专利信息
定位测试方法
无人车平台
激光雷达
视觉相机
受限
螺栓拆卸装置
电主轴系统
拆卸系统
拆卸螺栓
机器视觉装置
多层神经网络模型
纹理特征
筛选方法
热力图
图像分割算法