使用Sikuli实现UI自动化测试

一，需求

最近做RPA测试开发时发现一款好用的测试工具，名为Sikuli

二，Sikuli介绍

Sikuli（在墨西哥维乔印第安人的语言里是”上帝之眼”的意思）是由美国麻省理工学院开发的一种最新编程技术，使得编程人员可以使用截图替代代码，从而简化代码的编写流程。从它研究方向上看，是一种编程技术，但是该技术还可以用于进行大规模的程序测试，脚本程序编写使用的是python语言。

Sikuli官网

三，使用Sikuli

1. 在官网下载IDE客户端
   
2. 打开客户端，打开CMD窗口，输入以下命令即可打开，不需要安装

java -jar ./客户端名称

3. 下面直接上代码，下面的代码实现了打开浏览器，输入网址并访问的功能

find("1619052653788.png")
doubleClick("1619052653788.png")
wait("1618996045414.png")
click("AddressBar.png")
time.sleep(2)
type("a",Key.CTRL)
time.sleep(2)
type(Key.BACKSPACE)
time.sleep(2)
type("AddressBar.png","http://10.1.80.100:8080/qcbin/start_a.jsp")
time.sleep(2)

四，在pycharm工具使用Sikuli

1. 既然 Sikuli 支持 Python 语言，那么也可以运行在pycharm工具中
2. 安装 Java8 并配置环境变量
3. Sikuli 官网下载 sikulixapi-2.0.5.jar，在 classpath 中配置 sikulixapi-2.0.5.jar 的路径
4. Python环境安装所需类库 jpype
5. 运行代码

import time
import win32api
import win32con
from jpype import *
import os
from jpype._jvmfinder import getDefaultJVMPath
from selenium import webdriver
# from utils.base import Base
from jpype._core import isJVMStarted, startJVM
ImageDir = os.path.dirname(os.path.abspath('.'))
ImagePath = ImageDir + '\\TestGuiMian'

#startJVM(r'C:\Program Files\Java\jre1.8.0_101\bin\server\jvm.dll', '-ea', r'-Djava.class.path=D:\sikuli\sikulixapi.jar')

Screen = JClass('org.sikuli.script.Screen')
screen = Screen()
Key = JClass('org.sikuli.script.Key')
key = Key()
screen.doubleClick(ImagePath+"\\GuiMian.png")
time.sleep(2)
# 单击
screen.click(ImagePath+"\\UserName2.png")
# 双击
screen.doubleClick(ImagePath+"\\UserName2.png")
# 右击
screen.rightClick(ImagePath+"\\UserName2.png")
# 拖拽到指定位置松手
screen.dragDrop(ImagePath+"\\IE.png",ImagePath+"\\Window.png")
# 悬停
screen.hover(ImagePath+"\\UserName2.png")
# 检查是否存在
screen.exists(ImagePath+"\\IE.png")
# 等待出现
screen.wait(ImagePath+"\\IE.png")
# 查找
screen.find()
# 查找页面所有的相似图片
screen.findAll()
PathList = screen.findAll(ImagePath+"\\QQ.png")
# print(a)
Count = 0
for Path in PathList:
    if Count == 1:
        screen.rightClick(Path)
    Count += 1

# 输入，可以配合键盘按键输入
type(Key.ENTER)
# 输入，一次性将字符串送入
paste("12345")