摘要
本发明公开了一种基于增强现实的智能教学辅助系统,本发明将ORB算法与单一多任务深度学习网络相结合,同时实现特征点检测、边缘检测和深度估计任务,提取关键点的二维坐标、边缘信息和三维空间坐标,确保特征点的定位更加精准且具有较强的鲁棒性,此外,通过引入多头注意力机制,对全局特征图与局部特征点进行加权融合,优化特征点的表达和匹配性能,进一步提高了特征点检测的稳定性与准确性,为后续相机位姿估计提供了可靠的数据输入。基于提取的二维坐标、三维坐标及相机内参,结合PnP算法最小化投影误差求解相机的位姿信息,从而确保虚拟三维模型能够与真实教学目标物精准对齐。
技术关键词
智能教学辅助系统
虚拟三维模型
特征点
ORB算法
多头注意力机制
边缘检测
多任务损失函数
相机位姿估计
分支
坐标系
FAST算法
生成特征
图像
三维虚拟模型
矩阵
系统为您推荐了相关专利信息
特征点集合
位移测量方法
重构图像数据
激光发射装置
光学传感器
相机位姿估计方法
SLAM系统
坐标系
多项式
投影模型
精雕机控制系统
网格模型数据
物体
场景深度图
结构模型数据