摘要
本申请涉及无人机技术领域,特别涉及一种多模态无人机控制系统及控制方法,其中,系统包括:混合现实设备;构建单元用于根据无人机的周围环境数据构建全景仿真得到全景视频流,截取全景视频流的视口动态,将全景视频流投影到混合现实设备的显示球面上;显示单元,用于在混合现实设备上映射的全景图像上叠加交互信息;控制单元包括的紧急避险层控制无人机执行避险动作,语音控制层基于语音信号控制无人机,脑电控制层基于脑电信号控制无人机。由此,解决了相关技术中的无人机操控系统将无人机拍摄的画面简单传输至显示设备,无法满足用户对复杂飞行场景的感知需求,且存在操控的准确率低以及安全性差的问题。
技术关键词
混合现实设备
无人机控制系统
全景视频流
周围环境数据
控制无人机
脑电信号控制
语音
信息采集功能
无人机操控系统
急停功能
球面
脑电特征
双线性插值
多模态
图像
分类功能
无人机控制方法
控制单元
系统为您推荐了相关专利信息
巡航系统
激光雷达传感器
特征点
无人机巡检路径
像素点
三维动态模型
变电站现场作业
三维动态建模
管控方法
作业现场
安防监控方法
车辆
监控设备
安防监控装置
原始图像数据
轨迹跟踪控制方法
固定翼无人机
大角度机动姿态控制
误差
姿态控制器
路径规划方法
节点
邻域搜索算法
控制无人机
无人机路径规划技术