摘要
本发明涉及计算机视觉与可穿戴设备的技术领域,公开了一种基于机器视觉的智能眼镜环境感知方法及系统;所述智能眼镜环境感知方法,应用于VR可穿戴设备,具体包括以下步骤:S101:通过双目摄像头实时采集环境立体图像数据,同步获取多模态传感器数据,并以时间戳对齐方式存储至缓存队列;S102:对所述立体图像数据进行去畸变和光流补偿预处理,同时将多模态传感器数据通过预积分算法生成位姿增量,与毫米波雷达的障碍物点云数据进行空间对齐融合。本发明基于多传感器紧耦合因子图优化框架,包括双目+IMU+毫米波雷达,在动态环境下实现水平定位误差≤1.2cm、高度误差≤2cm,通过运动聚类算法与社交‑LSTM轨迹预测模型,可准确区分静态/动态目标。
技术关键词
环境感知方法
三维环境地图
智能眼镜
立体图像数据
语义标签
避障路径
多模态传感器
联合优化算法
双目摄像头
热力图
SLAM算法
积分算法
环境感知系统
轨迹预测模型
视觉
语义分割网络
识别障碍物
支持多通道人机交互
系统为您推荐了相关专利信息
自动化管理方法
深度Q网络
布隆过滤器
屏幕
图像
电力设施部件
三维点云模型
语义标签
三维点云数据
偏差
地图构建方法
语义标签
构建动态地图
融合策略
地图构建系统
融合激光雷达
实时监测方法
煤仓
相机
激光雷达数据采集