一种面向移动多处理器的深度学习模型协同推理方法

AITNT
正文
推荐专利
一种面向移动多处理器的深度学习模型协同推理方法
申请号:CN202410935780
申请日期:2024-07-12
公开号:CN118966350A
公开日期:2024-11-15
类型:发明专利
摘要
本发明属于移动计算和深度学习技术领域,具体涉及一种面向移动多处理器的深度学习模型协同推理方法。本发明通过实时监控各处理器的状态,结合模型解析器对深度学习模型进行子图划分,使用中央调度器根据处理器负载、温度和运行状态动态优化执行策略。系统包括硬件监视器、模型解析器和调度器三大核心组件,通过这些组件的协作,可以高效地管理和执行多个深度学习模型的推断任务,显著提升了移动设备上的执行效率和能源效率。本发明能够适应各种硬件异构性,特别适用于资源受限的移动和边缘设备,解决了传统移动推理系统在面对多任务协同推理时的性能瓶颈问题。本发明具有调度灵活、响应快速的特点,适用于多种实时应用场景。
技术关键词
深度学习模型 推理方法 多处理器 调度器 分析器 监控器 监控处理器状态 加载器 资源分配 Android系统 实时数据 硬件监视器 实时处理器 解析器 深度学习技术 推理系统 关系 复杂度 动态
系统为您推荐了相关专利信息
1
一种多源传感数据的时空特征融合建模方法
融合建模方法 数据 统计特征 网格 交互特征
2
一种自动甄别高速公路货车占用快车道方法
道路指示牌 识别模块 交通管理效率 深度学习框架 车道
3
集成人工智能技术的数据库综合治理系统及其方法
综合治理方法 人工智能技术 智能探针 决策 综合治理系统
4
一种API安全防护方法、装置、电子装置和存储介质
防护方法 深度学习模型训练 逻辑分析 接口 动态
5
一种口腔黏膜病病灶分割系统及方法
口腔黏膜病 分割系统 深度学习模型优化 图像 病灶分割方法
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号