摘要
本申请公开了一种数字孪生重构方法、设备、介质及产品,涉及计算机视觉技术领域,该方法包括:增强处理获取的场景图像得到增强图像;采用改进的YOLOv5算法在增强图像中进行关键目标检测,得到检测结果;从检测结果中提取关键目标的特征点,进行特征点匹配处理,得到匹配特征点;采用三角化方法将匹配特征点映射到三维空间,得到三维点云;采用光束法平差优化三维点云中的三维点的坐标,得到优化后的三维点云;采用卡尔曼滤波器基于特征点进行目标跟踪与预测,得到目标运动轨迹;基于优化后的三维点云和目标运动轨迹,结合场景的语义信息,实时重构三维场景,并进行可视化展示。本申请能够高效、准确地重构多视角信息、捕捉人机协作场景。
技术关键词
重构方法
特征点
三角化方法
场景
卡尔曼滤波器
图像
生成三维点云
计算机视觉技术
坐标
数字孪生体
虚拟现实技术
处理器
人机协作
轨迹
计算机程序产品
算法