摘要
本发明提供了多模态LLM Agent用于无人机系统的多层次智能开发框架,本发明基于分层设计,构建了一个多层次智能控制框架,包含大脑(大模型)、小脑(视觉、语音小模型)和控制执行(经典控制算法)三个层次。大脑作为高级中枢,负责处理自然语言交互和复杂任务规划等高层任务;小脑作为中级中枢,专注于场景定位、感知、避障和语音识别等任务;控制执行作为低级中枢,实现对无人机底层硬件的实时控制。三个层次相互协作,共同实现无人机的智能控制。
技术关键词
无人机系统
多层次
离线语音识别
自然语言
无人机精确位置
大语言模型
无人机飞行路径
识别交通标志
视觉检测算法
闭环控制功能
控制无人机飞行
规划
飞行姿态控制
框架
场景
动态避障
智能农业
系统为您推荐了相关专利信息
数据分析模型
神经网络算法
策略
可视化工具
输出模块
浅层特征提取
多层次特征提取
深度特征提取
图像识别模型
深层特征提取
创建时间序列数据
知识图谱构建
语义匹配算法
追踪方法
分析模块