最近在做H5端UI自动化测试，其中遇到了一个棘手问题就是密码控件，因为密码控件的按钮每次都是随机不一样的，没法固定去点击输入密码。密码的输入框是div不是input，所以没法用send_keys()这个方法。输入的密码都是经过加密后传给后台的，所以没法直接传值。各种途径都被堵死，宝宝心里苦啊。想来想去只能模拟人去点击输入密码，但是按键每次位置不一样，是个难题，于是想了一个办法就是识别按键上的数字，然后再去点击，接下来说一下实现的思路：
1、看下图我们输入密码的页面，
所看到的每个数字，都是一个小图片，都可以作为元素来定位到，如下图代码，按钮的class_name都是有序可循的，
2、每次进入到这个页面，就会定位到这些元素，然后把这些图片保存下来，这块我用的是
screenshot_as_file()这个方法。并以所在位置的class_name中的数字命名（比如area_3这个位置的图片，我就命名为3.png，以此类推）
3、然后对图片上的数字进行识别，这块用到了pytesseract模块和tesseract-ocr这个工具（识别过程遇到了一个问题，就是若图片上只有一个数字则识别不出来，我已经写了另一个随笔来说明这个问题，请戳https://www.cnblogs.com/zy0209/p/10162917.html）
4、假设我的密码是6个0，若识别出了图片中的数字是0，则把图片的名称返回（这块我写的for循环，其实返回的值就是for循环的当前取值），作为元素定位的class_name中的那个数字
到这里，我们的问题就完美解决。蹭蹭蹭，输入密码，进行下一步。啦啦啦，好开心~
PS：
1.虽然我做的是H5端的自动化，但是我使用chrome模拟的手机，所以还是选择的是selenium框架
2.这是我解决这个问题的方法，如果大家有其他的方法，欢迎交流， 共同进步