摘要
本发明公开了一种任务指令的执行方法及装置、存储介质及电子装置,应用于设备代理中心,包括:获取目标对象对终端设备上的应用软件的任务指令;使用检索增强模型从任务操作手册中获取与任务指令所属任务类型对应的第一操作指令集合;使用多模态大语言模型获得与终端设备实时显示的界面信息所对应的界面描述信息;将界面信息,界面描述信息对应的界面操作信息,基于任务指令生成的系统提示信息和第一操作指令集合对应的历史决策信息输入智能大语言模型,得到智能大语言模型输出的第一执行指令;将第一执行指令发送至终端设备,以使终端设备执行第一执行指令,并得到第一执行结果。
技术关键词
大语言模型
终端设备
指令
图像特征向量
界面
文本特征向量
多模态
电子装置
视觉
对象
展示工具
计算机程序产品
文本识别
元素
执行装置
处理器
决策
模块
系统为您推荐了相关专利信息
订单
对象推荐方法
计算机程序指令
输入神经网络模型
计算机程序产品
样本
文本编码器
图像编码器
多层感知器
跨模态学习