一种用于在边缘设备上减少人工智能模型响应延迟的任务调度方法

AITNT
正文
推荐专利
一种用于在边缘设备上减少人工智能模型响应延迟的任务调度方法
申请号:CN202411910664
申请日期:2024-12-24
公开号:CN119668815A
公开日期:2025-03-21
类型:发明专利
摘要
本发明为一种用于在边缘设备上减少人工智能模型响应延迟的任务调度方法,所述方法包括如下步骤:1)对数据进行收集与整理;2)构建和训练预测模型;3)对预测模型进行运行调度;4)决策执行。本发明是一种用于对服务器无感知边缘计算范式中的模型请求进行调度,实现减少模型响应延迟的方法,本发明适用于边缘设备,能够有效减少人工智能模型响应延迟,以充分发挥边缘计算在人工智能领域的潜力,满足日益增长的对低延迟、高效能人工智能服务的需求。
技术关键词
人工智能模型 任务调度方法 训练预测模型 深度神经网络 人工智能服务 机器学习模型 神经网络模型 数据 传播算法 服务器 容器 决策 训练集 误差 格式 标签 数值 平台
系统为您推荐了相关专利信息
1
一种面向机载机电系统的神经网络的部署系统和方法
轻量化神经网络 优化神经网络 智能体模型 深度神经网络 神经网络模型
2
一种基于异构系统的DNN通用部署方法及系统
异构系统 数据依赖关系 通信链路 核心 功耗
3
一种血细胞分离机智能管控方法及系统
血细胞分离机 智能管控方法 模型预测控制算法 风险 参数
4
基于多模态数据融合的患者运动功能障碍评估系统及方法
运动功能障碍评估 运动功能评估 多模态数据融合 深度神经网络 残差网络
5
基于混合神经网络模型的自然语言处理方法、装置、设备及介质
混合神经网络模型 自然语言文本 脉冲神经网络模型 联合损失函数 周期性特征
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号