一种模型调用方法、装置、设备及存储介质

AITNT
正文
推荐专利
一种模型调用方法、装置、设备及存储介质
申请号:CN202510884571
申请日期:2025-06-27
公开号:CN120806135A
公开日期:2025-10-17
类型:发明专利
摘要
本申请实施例提供了一种模型调用方法、装置、设备及存储介质,可应用于人工智能技术领域,在该方法中,接收待处理任务中多个子任务各自的样本信息,分别将每个子任务的样本信息与设定的提示模板融合,得到每个子任务的提示文本,确定待处理任务指定的目标模型,目标模型部署在目标设备;当目标设备的资源利用率小于第一阈值时,基于资源利用率,从多个子任务中选取至少一个子任务;将至少一个子任务各自的提示文本输入目标模型进行并发推理,获得至少一个子任务各自的推理结果,实现了大量并发任务的复杂环境下系统吞吐能力的最大化,从而提高了任务处理的效率。
技术关键词
计算机设备 文本 样本 计算机程序产品 模板 资源 存储程序指令 可读存储介质 人工智能技术 模块 队列 存储器 标记 处理器
系统为您推荐了相关专利信息
1
基于深度神经网络实现干扰抑制的基站信号恢复方法
基站 信号恢复方法 样本 深度神经网络算法 服务器
2
人物推荐方法、装置、电子设备及存储介质
项目 科研 推荐方法 模糊聚类算法 字段
3
基于大数据资源的多行业调研文本数据分析模型及方法
文本数据分析方法 大数据 数据分析模型 标签 调查数据处理
4
电力多智能体动态协作巡检方法及系统
多智能体动态 工作状态数据 巡检方法 巡检路径 电力巡检
5
数据转换方法、装置和电子设备
编码向量 解码信息 数据转换方法 音频 计算机可执行指令
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号