摘要
本发明公开了一种工程机械的倒车指示方法、装置、设备及介质,属于工程机械技术领域,在工程机械的动臂上增设补盲摄像头,方法包括:建立动臂位姿参数与补盲摄像头视场的空间转换模型,计算动臂位姿下补盲摄像头视场与监视盲区的重叠关系;根据重叠关系调整补盲摄像头视场,使其跟随对准监视盲区,获取补盲图像并与环视拼接图像拼接形成全景图像;通过训练好的障碍物识别模型对环视图像和补盲图像进行障碍物识别,将障碍物识别结果标注在全景图像上;获取车身的动态参数并输入非线性轨迹预测模型,通过龙格库塔法求解车身质心的运动轨迹,将运动轨迹标注在全景图像上。本发明能够有效对作业环境进行全面动态感知,提升倒车操作的安全性与精准性。
技术关键词
障碍物识别
轨迹预测模型
龙格库塔法
图像拼接
摄像头坐标系
网络架构
图像提取特征点
非线性
RANSAC算法
车身
指示装置
参数
摄像头内参
矩阵
关系
工程机械技术