基于多模态大模型对比及双重校验的界面异常检测方法

AITNT
正文
推荐专利
基于多模态大模型对比及双重校验的界面异常检测方法
申请号:CN202510973678
申请日期:2025-07-15
公开号:CN120472282B
公开日期:2025-09-09
类型:发明专利
摘要
本发明涉及大模型技术领域,公开了基于多模态大模型对比及双重校验的界面异常检测方法,包括:部署若干图像对比专用的大模型;获取UI样式图集和程序界面截图集,筛选出相似性低于第一预设阈值的样本对组成第一样本对集;利用多个大模型分别对第一样本对集中的样本对进行图像对比,将对比结果为不一致的数量超过大模型数量一半的样本对组成第二样本对集;通过像素级对比定位第二样本对集中的样本对的错误像素点,绘制第一错误框;通过各UI样式的各层级的样式信息对比定位第二样本对集中的样本对的错误像素点,绘制第二错误框;融合第一错误框和第二错误框,获得错误标注图片并上报。本发明有效解决了现有技术在UI一致性自动化测试中的痛点。
技术关键词
异常检测方法 多模态 样本 像素点 样式 界面 文本区域识别 坐标 层级 图像 对比度 直方图 图片 亮度 通道 颜色 分辨率 数值
系统为您推荐了相关专利信息
1
基于大模型生成和知识图谱集成的多模态关系抽取方法
关系抽取方法 文本 构建知识图谱 节点特征 注意力机制
2
一种提升智能体能效操作任务能效方法及系统
能效方法 能效系统 操作系统 多模态 分系统
3
基于多模态数据的镇痛反馈与控制方法、系统、电子设备及存储介质
多模态传感器 语音识别传感器 指数 模糊PID控制器 非暂态计算机可读存储介质
4
基于云计算的图像数据管理系统
图像数据管理系统 分块 编码 深度神经网络 参数显示机构
5
一种笔迹展示方法、系统及存储介质
笔迹信息 纹理特征 生成网络模型 生成对抗网络模型 展示方法
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号