摘要
本发明公开了一种基于自编码器和智能体的云边协同推理方法,旨在解决资源受限设备在执行深度学习推理时面临的计算瓶颈和高延迟问题,本发明提出的技术方案包括以下步骤:首先,将复杂深度神经网络模型根据计算复杂度与设备性能拆分为边云协同执行的多个部分;然后,通过轻量自编码器压缩中间层数据,减少数据传输量;最后,使用智能体生成的多任务推理策略,实时根据设备负载、网络带宽及实时任务需求,选择合适的推理策略,该方法通过拆分深度神经网络模型、轻量自编码器进行中间数据压缩、以及通过训练智能体生成的策略实现多设备协同推理,显著提高推理效率,降低推理时间,并且在保证推理精度的前提下优化系统资源利用率。
技术关键词
推理方法
深度神经网络模型
知识蒸馏技术
学生
标签
教师
编码器结构
优化系统资源
中间层
多智能体协作
资源受限设备
多设备协同
训练智能体
策略
复杂度
自动编码器
多任务
模型预测值
系统为您推荐了相关专利信息
意图识别模型
意图识别方法
计算机可读指令
数据
策略
瑕疵检测方法
数据立方体
玻璃板
多模态数据采集
生成热力图
可见光图像
输电走廊
山火识别方法
语义标签
多模态