Sikuli替代AutoIT,实现自动化文件上传
在自动化测试中处理Windows弹出框时,通常采用AutoIT编写脚本进行操作,之前的文章《Java+Selenium2+AutoIt实现右键文件另存为功能》中有详细介绍,可以重新学习一下。上传文件同样可以使用AutoIT生成exe脚本来操作Windows窗体。Sikuli,意为“上帝之眼”,其官方网站为http://www.sikulix.com/,提供了一种不同的解决方案:通过图片识别来操作Windows弹出框或其他窗口。其工作原理是在当前页面中识别目标图片,并对其进行点击、输入、等待显示、判断是否存
在自动化测试中处理Windows弹出框时,通常采用AutoIT编写脚本进行操作,之前的文章《Java+Selenium2+AutoIt实现右键文件另存为功能》中有详细介绍,可以重新学习一下。
上传文件同样可以使用AutoIT生成exe脚本来操作Windows窗体。
Sikuli,意为“上帝之眼”,其官方网站为http://www.sikulix.com/,提供了一种不同的解决方案:通过图片识别来操作Windows弹出框或其他窗口。
其工作原理是在当前页面中识别目标图片,并对其进行点击、输入、等待显示、判断是否存在等操作。
操作流程如下:
1、识别文本输入框,并输入文件名;
2、识别并点击Open按钮。

所需依赖包:
sikulixapi 1.1.2
bridj 0.7.0
支持的编程语言包括Java、Python等。
Maven配置如下:
com.sikulix sikulixapi 1.1.2 com.github.vidstige jadb com.nativelibs4java bridj 0.7.0
示例代码如下:
package com.xxx.sikuli;
import org.openqa.selenium.By;
import org.openqa.selenium.WebDriver;
import org.sikuli.script.FindFailed;
import org.sikuli.script.Pattern;
import org.sikuli.script.Screen;
import org.openqa.selenium.chrome.ChromeDriver;
public class SikuliDemo {
public static void main(String[] args) throws FindFailed, Exception {
// 浏览器版本与Driver版本需对应,否则会报错,无法启动
System.setProperty("webdriver.chrome.driver", "src/test/resources/driver/chromedriver.exe");
String filepath = "src/test/resources/";
String inputFilePath = "src/test/resources/";
Screen screen = new Screen();
Pattern fileInputTextBox = new Pattern(filepath + "FileTextBox.png");
Pattern openButton = new Pattern(filepath + "OpenButton.png");
WebDriver driver;
// 打开Chrome浏览器
driver = new ChromeDriver();
driver.get("http://demo.guru99.com/test/upload/");
// 点击Browse按钮并使用Sikuli处理Windows弹出框
driver.findElement(By.xpath(".//*[@id='uploadfile_0']")).click();
screen.wait(fileInputTextBox, 20);
screen.type(fileInputTextBox, fileInputTextBox.getFileURL().toString());
screen.click(openButton);
// 关闭浏览器
driver.close();
System.out.println("**********1 file has been successfully uploaded.**********");
}
}总结:
实际上,Sikuli还可以用于其他图片识别的自动化测试,但它对分辨率有一定的要求,因为它基于像素识别。因此,当目标图片变化较少时,Sikuli是一个不错的选择,如上例中的上传文件文本输入框和Open按钮基本不变。然而,对于经常变化的目标图片,Sikuli就不太适用,因为每次变化都需要重新截图。在这种情况下,使用AutoIT或其他工具会更有效。
Windows 10 是一款微软推出的经典操作系统,拥有硬件兼容性与多任务处理能力。它更偏向把系统状态查看和常用调节动作放在一起,适合需要持续观察和微调设备状态的场景。
极度公式是一款跨平台专业LaTeX公式识别编辑软件,支持OCR公式识别和多平台编辑。和使用说明,避免使用,享受完整功能与稳定支持。做扫描整理、文字提取和表格转换时,它能把识别后的处理步骤接得更顺,资料录入这类场景会省下不少时间。
















