摘要
本发明涉及大模型技术领域,公开了基于多模态大模型对比及双重校验的界面异常检测方法,包括:部署若干图像对比专用的大模型;获取UI样式图集和程序界面截图集,筛选出相似性低于第一预设阈值的样本对组成第一样本对集;利用多个大模型分别对第一样本对集中的样本对进行图像对比,将对比结果为不一致的数量超过大模型数量一半的样本对组成第二样本对集;通过像素级对比定位第二样本对集中的样本对的错误像素点,绘制第一错误框;通过各UI样式的各层级的样式信息对比定位第二样本对集中的样本对的错误像素点,绘制第二错误框;融合第一错误框和第二错误框,获得错误标注图片并上报。本发明有效解决了现有技术在UI一致性自动化测试中的痛点。
技术关键词
异常检测方法
多模态
样本
像素点
样式
界面
文本区域识别
坐标
层级
图像
对比度
直方图
图片
亮度
通道
颜色
分辨率
数值
系统为您推荐了相关专利信息
关系抽取方法
文本
构建知识图谱
节点特征
注意力机制
多模态传感器
语音识别传感器
指数
模糊PID控制器
非暂态计算机可读存储介质
图像数据管理系统
分块
编码
深度神经网络
参数显示机构
笔迹信息
纹理特征
生成网络模型
生成对抗网络模型
展示方法