基于YOLO的移动应用自动测试

作者:王寅; 黄河基; 李佳芮
来源:现代信息科技, 2023, 7(18): 106-113.
DOI:10.19850/j.cnki.2096-4706.2023.18.021

摘要

现有的GUI自动测试技术通常需要借助被测设备的底层界面框架来获取信息,难以实现跨平台。针对这种现象,文章提出了基于视觉的移动应用自动测试技术,使用YOLOv5模型检测界面中可执行控件,对不同测试输入下的状态合并方法进行研究,采用交并比与平均表面距离相结合的方式识别界面中相似状态。经过实验证明,该方法状态识别效果良好,为基于视觉特征的GUI自动化测试提供一定的参考。

全文