问题引入
很多app的都有访问手机相册,然后发送图片的功能。这个功能也是比较常测试的一点。
一般来说,点开手机相册,就有的相册的缩略图。如下图所示:
这种缩略图,在appium是找不到任何定位。xpath也没有。在下面的情况下,该如何选择该图片,进行发送呢。解决的方案来自于这篇博客
https://appiumpro.com/editions/32
appium1.7引入了根据图片策略来定位元素。传入图片的base64位编码,然后引入opencv(开源视图处理库来匹配图片元素。
首先我们要做的是安装opencv4nodejs库。opencv4nodejs库的介绍如下https://www.npmjs.com/package/opencv4nodejs
安装的步骤按照这个链接:https://gist.github.com/adwellj/61e7f202bcfe5b96f312293e9c812ca6
注,这边说的是两种方式,只要选择其中的就好了。
下面列出主要代码:
获取图片的Base64编码:
public String getPictureImageB64() throws URISyntaxException,IOException{
String ImageName="picturetest02.jpg";
URL refImgUrl=getClass().getClassLoader().getResource(ImageName);
File refImgFile=Paths.get(refImgUrl.toURI()).toFile();
return Base64.getEncoder().encodeToString(Files.readAllBytes(refImgFile.toPath()));
}
将Base64编码变成对应的appium中MobileBy(MobileBy需要java-clinet7.0 以上的版本,需要更新客户端库。
By imageBy=MobileBy.image(getPictureImageB64());
这里只需要将你所要选择图片放到项目的resources文件夹即可。上述代码就可以找到。
appium定位元素位置:
public void SelectImageElement(AndroidDriver<AndroidElement> driver,By ImageBy){
WebDriverWait wait=new WebDriverWait(driver,10);
AndroidElement androidElement=null;
wait.until(ExpectedConditions.presenceOfElementLocated(ImageBy)).click();
}
}
在appium的官方文档上,其实也谈到一个方法。http://appium.io/docs/en/advanced-concepts/image-elements/
driver.findElementByImage(String Base64Code)
上面返回的图片元素只能进行下面的操作
- click
- isDisplayed
- getSize
- getLocation
- getLocationInView
- getElementRect
上述的操作,而不能进行别的类似sendKeys操作等。