摘要
本申请公开了一种目标元素定位方法、设备以及存储介质,涉及自动化测试技术领域,包括:获取当前页面的截图图像,对截图图像进行实例分割,得到实例掩膜;获取当前页面中的可视化DOM元素的多模态属性信息、目标元素的文本描述和目标元素类别,根据实例掩膜、多模态属性信息和目标元素类别对可视化DOM元素进行筛选,得到第一候选元素,并确定第一候选元素的多维度评分;根据第一候选元素的多模态属性信息和多维度评分,生成排序后的候选定位器;按顺序执行候选定位器对应的操作,得到目标元素的目标元素定位结果,解决现有的元素定位方法在页面结构变化时元素定位失败率高的技术问题,降低定位失败率,提升自动化测试中元素定位的准确性和可靠性。
技术关键词
元素
定位器
定位方法
多模态
文档对象模型
掩膜
图像
实例分割
自动化测试技术
生成规则
文本
页面结构
对象定位
定位设备
处理器
样式
语义
可读存储介质
存储器
系统为您推荐了相关专利信息
温度监测方法
可见光图像
多模态
热红外相机
可见光相机