摘要
本发明公开了一种无人机前端违章行为识别方法、系统、设备及介质,通过无人机搭载的摄像头采集视频帧图像,同时通过无人机搭载的惯性测量单元获取惯性测量单元数据,构成无人机前端违章行为识别数据集;将无人机前端违章行为识别数据集划分为训练集和测试集;构建无人机前端违章行为识别模型,用训练集和测试集分别进行模型训练及评估;将无人机摄像头实时采集的视频帧图像和惯性测量单元的实时采集的惯性测量单元数据输入训练及评估后的无人机前端违章行为识别模型,生成违章行为的识别结果。本发明通过结合视觉图像和惯性测量单元数据的多模态融合技术,提升违章行为识别的准确性和实时性。
技术关键词
长短期记忆网络
生成对抗网络
识别方法
视频帧
无人机摄像头
图像特征向量
构建无人机
无人机数据采集
多模态特征融合
运动特征
模块
视觉特征提取
时序
特征提取网络
系统为您推荐了相关专利信息
磁致伸缩执行器
传感网络系统
刀具磨损预测模型
磁致伸缩元件
火炮身管
位移监测数据
数据驱动模型
滑坡灾害预警
滑动平均滤波
边坡
螺旋桨叶片
联合损失函数
深度卷积神经网络模型
颤振识别方法
样本
自动控制系统
阀门控制模块
人机交互模块
高精度压力传感器
长短期记忆网络
多模态传感器
体温智能监测
智能分析模块
隐私保护模块
红外阵列传感器