摘要
本申请涉及人工智能领域,尤其是涉及一种基于RPA智能体的用户交互界面操作方法,主要包括:采集用户的输入数据,使用多模态模型识别所述输入数据,所述多模态模型将所述输入数据转换为业务流程图;所述子任务智能体通过多模态模型分析所述任务意图,将所述任务意图拆解为可执行的步骤,并根据所述任务意图的分析结果打开对应的用户交互界面;所述子任务智能体基于所述页面操作描述数据生成对应的RPA操作控件,并执行所述RPA操作控件。本申请减少了RPA操作的人工参与程度,缩短了任务执行的时间,显著提升了整体自动化效率,降低了RPA技术的上手门槛。
技术关键词
界面操作方法
页面结构
意图
多模态
页面控件
处理器
可读存储介质
计算机程序产品
数据采集模块
元素
标签
计算机设备
分析模块
存储器
对象