基于AI质检结果的指令控制系统

本发明涉及机器人技术领域，公开了基于AI质检结果的指令控制系统，包括：多模态数据采集模块，用于采集可见光图像、热成像图像、环境传感器数据以及当前摄像头参数，并将可见光图像数据、热成像图像数据、环境数据和当前摄像头参数输出；多模态图神经网络分析模块，接收可见光图像数据、热成像图像数据、环境数据和当前摄像头参数构建异构图模型并进行特征提取和缺陷识别，并将缺陷类别信息、置信度、当前摄像头参数和环境数据输出。本发明采用多模态数据融合采集方式，结合可见光图像、热成像图像、环境传感器数据及摄像头参数，达到了复杂场景下目标信息全面感知的效果的效果，解决了信息维度不足导致识别误判的问题。