摘要
本发明公开了一种GUI测试用例生成方法、计算机程序及终端,属于软件界面测试领域,包括以下步骤:获取待测试网站界面的HTML代码;利用目标检测模型识别用户界面元素并进行标记,得到标记后的图片;将标记后的图片、HTML代码、测试需求任务输入多模态大语言模型,生成测试用例。利用目标检测模型对UI元素进行识别,结合HTML代码输入多模态大语言模型,使多模态大语言模型能够学习不同模态数据,能够更全面理解用户界面的布局、功能、内容等,以此提升测试用例生成的准确性,生成高度适配实际UI元素和交互逻辑的测试用例。
技术关键词
超文本标记语言
生成方法
大语言模型
注意力机制
生成测试用例
识别用户界面
网络
多模态
图片
元素
沙漏
坐标算法
生成高度
计算机程序产品
处理器
生成特征
融合特征
系统为您推荐了相关专利信息
实体链接方法
多模态特征融合
图像特征向量
文本特征向量
链接数据集
文本
预训练语言模型
语义关联度
通信接口
电子设备
神经网络模型
非易失性存储介质
图像
多模态
文本