基于图像内容识别技术的移动应用智能检测方法及装置

本发明公开了一种基于图像内容识别技术的移动应用智能检测方法及装置，包括：获取待检测的移动应用的自定义控件的界面图像；构建图像分类模型和图像识别模型并训练，得到经训练的图像分类模型和经训练的图像识别模型；将界面图像输入到经训练的图像分类模型进行分类，得到对应的自定义控件类型，根据不同的自定义控件类型将界面图像分配到不同的自定义控件图像集合中；将每个自定义控件图像集合中的界面图像输入到经训练的图像识别模型，识别得到控件信息；采用自动化测试工具对待检测的移动应用中的原生控件进行识别，得到指令坐标集，根据指令坐标集和控件信息分别对原生控件和自定义控件进行自动化点击操作，得到检测数据，能够提高成功率。