摘要
本发明涉及人工智能技术领域,具体提供一种多模态的生产线状态推理方法、系统、设备及介质,包括:采集生产线上多个设备各自产生的多模态传感器数据;对来自不同设备的多模态传感器数据进行时间戳对齐,并融合生成多维时序特征矩阵;将所述多维时序特征矩阵输入至边缘处理器中预先部署的轻量级预测模型,输出生产线状态预测结果;其中,所述轻量级预测模型是通过知识蒸馏方法从云端部署的教师模型压缩得到,所述轻量级预测模型包含由LSTM网络构成的特征提取器和GAN网络构成的对抗训练模块。本发明降低了响应时间,且能准确定位跨设备传导性故障,显著优于传统独立设备诊断模式。
技术关键词
动态时间规整
时序特征
知识蒸馏方法
推理方法
动态知识图谱
多模态传感器
模型压缩
数据
跨模态
对齐设备
声学传感器阵列
矩阵
教师
云端
网络
时间偏移量
处理器
推理系统