摘要
一种基于大语言模型场景理解的脚本粒度GUI测试迁移方法,包括LLM‑Agent场景抽取模块、视觉增强模块、脚本预处理模块和自动化探索模块。视觉增强模块包括提取图片文字信息、识别组件坐标,以降低大模型对图片的理解难度。脚本预处理模块则充分分析脚本的抽象语法结构,并提取场景理解所需的基本信息,如操作目标、操作类别等。LLM‑Agent场景抽取模块则依据预处理后的脚本和截图抽取功能场景,形成对场景的整体理解后自动化探索待测应用生成测试脚本。而自动化探索模块则负责具体设备的操作,以及支持整个框架的自动化运行,包括错误纠偏、终止判断等部分。
技术关键词
迁移方法
大语言模型
生成测试脚本
场景
语法结构
模块
光学字符识别
边缘检测算法
回放设备
图片
视觉
命令
框架
坐标
混合型
文本
组织
线条
嵌套
系统为您推荐了相关专利信息
三维网格模型
三维场景模型
多源遥感数据
可视化场景
雷达遥感数据
三维物体重建方法
隐式结构
大语言模型
多视角
三维结构
测试场景生成方法
交通车
轨迹
线性回归模型
基础