摘要
本发明公开了一种基于视图关系图谱识别RPA中相似元素的方法,包括如下步骤:步骤1、获取网页页面中的可见元素以及可见元素对应的元素框,利用可见元素和元素框构建视图关系树,再将视图关系树转换为视图关系图谱;步骤2、在目标页面中捕获目标元素的目标大框时,将视图关系图谱中与目标大框尺寸相同或相似的元素框视为相似框;步骤3、遍历所有相似框,识别相似框内部与相似框相对位置固定的目标小框,将目标小框所对应的可见元素作为高置信元素;步骤4、利用高置信元素将相似框中的满足位置关系的可见元素视为相似元素。本发明可以使RPA工作过程能够准确找到相似元素的范围,不会出现相似元素的多找或漏找,具有准确性高的优点。
技术关键词
元素
关系
图谱
节点
网页页面
语义
文本
概念
样式
多模态
布局
软件
坐标
尺寸
模式