一种面向行为学习的智能操作模型构建方法、装置及系统

本发明提供了一种面向行为学习的智能操作模型构建方法、装置及系统，涉及数据处理技术领域，包括：基于操作影像和操作日志，生成用于在目标设备实现样本任务的样本用户操作信息序列；其中，样本用户操作信息序列中的样本用户操作信息，包括基于操作日志确定的操作指令和基于操作影像确定的操作目标；将样本任务对应的样本自然语言指令信息输入第一语言模型，得到第一语言模型输出的第一操作信息序列；基于样本任务对应的第一操作信息序列，与样本任务的样本用户操作信息序列之间的损失值，调整第一语言模型的模型参数，得到智能操作模型。能够提升获取任务实现步骤的效率以及用户通过目标设备执行目标任务的效率。