一种基于边缘计算的智能工厂多模态数据处理系统

本发明公开了一种基于边缘计算的智能工厂多模态数据处理系统，包括多协议数据采集模块、多模态融合引擎、边缘推理引擎以及动态优化模块；多协议数据采集模块用于获取智能工厂的多模态数据；多模态融合引擎用于模态特征提取并判定待决策任务的任务优先级；动态优化模块用于动态调整NPU和GPU运算资源的分配策略；边缘推理引擎用于对任务关联后的模态特征进行协同分析获得当前决策任务的决策结果。该多模态数据处理系统能够据任务优先级来动态调整NPU和GPU运算资源的分配策略，从而能够使得紧急情况得到快速地决策处理，保证边缘计算的决策效率；通过任务关联能够将任务相关的模态特征进行相互关联，从而保证决策评估的全面性。