zoukankan      html  css  js  c++  java
  • 教你用.Net来玩微信跳一跳

    目前开发的所有代码都已经上传到了GitHub。欢迎大家来Star

    https://github.com/GiantLiu/AutoJump

    目前程序分为“全自动版本”和“半自动版本”

    全自动版本

    WeChat.AutoJump.CMDApp

    当手机连接好后,打开微信跳一跳

    点击"开始游戏"后。运行此程序。就可以实现自动跳了

    半自动版本

    WeChat.AutoJump.WinApp

    此版本需要鼠标左键点小黑人的底部,鼠标右键点目标位的中心

    然后程序就会自动跳到相应的位置

    程序原理
    1。将手机点击到《跳一跳》小程序界面;点击“开始游戏”后
    2。用Adb工具获取当前手机的截图,半下载到本地
    3.1。如果是半自动版本,那么就要用鼠标左右键来点击起始和目标位置
    然后程序会自动算出要跳动的距离与要点击屏幕的时间。
    3.2。如果是全自动版本,那么程序会自动算出小黑人的位置与目标的中心点,
    然后自动算距离与点击屏幕的时间。

    4。用Adb工具向手机发送点击屏幕蓄力命令,完成一次跳动

    目前程序只能支持Android设备,IOS设备只写了接口,还没有实现
    步骤:

    • 安卓手机打开USB调试,设置》开发者选项》USB调试
    • 电脑与手机USB线连接,确保执行adb devices可以找到设备id
    • 界面转至微信跳一跳游戏,点击开始游戏
      运行自动/半自动版本程序,就可以开始游戏之路

    •  

    代码关键实现
    1。通过adb拿到手机的屏幕截图,其实就是向手机发送相关的命令

      第一条命令是把屏幕的截图以png格式保存到手机SD卡
      第二条命令是把手机SD卡里面的图片下载到本地硬盘对应的目录
      第三条命令是把手机里的截图删除
      第四条命令是发送屏幕按压命令 从X:100,Y:100这个位置向X200,Y:200这个位置移动,其中时间为500毫秒

    adb shell screencap -p /sdcard/1.png
    adb pull /sdcard/1.png D:/Download/
    adb shell rm /sdcard/1.png
    adb shell input swipe 100 100 200 200 500

    这里是.net发送命令相关代码

    复制代码
    public string AdbCommand(string arg)
            {
                using (Process process = new Process())
                {
                    var adbDirectoryPath = Path.Combine(AppDomain.CurrentDomain.BaseDirectory, "AndoridAdb");
                    var adbPath = Path.Combine(adbDirectoryPath, "adb.exe");
                    process.StartInfo.FileName = adbPath;
                    process.StartInfo.Arguments = arg;
                    process.StartInfo.UseShellExecute = false;
                    process.StartInfo.RedirectStandardInput = true;   //重定向标准输入   
                    process.StartInfo.RedirectStandardOutput = true;  //重定向标准输出   
                    process.StartInfo.RedirectStandardError = true;   //重定向错误输出
                    process.StartInfo.CreateNoWindow = true;
                    process.Start();
                    var result = process.StandardOutput.ReadToEnd();
                    process.WaitForExit();
                    process.Close();
                    return result;
                }
            }
    复制代码

    2。如果是半自动版本,那么要先鼠标左键点小黑人的底部,然后鼠标右键点目标位置的中间。
    点完右键后。程序会自动算出两点之间距离与时间。然后就跳一步了。这个没有什么技术问题

    3。如果是全自动版本,那反第一步,你拿到屏幕截图后。要分析出小黑人的位置
    我这里的话。就用了EmguCV (OpenCV的.net调用)。
    我们可以用到OpenCV的模板匹配。MatchTemplate方法
    模板的话。随便找一张屏幕截图,用PS把小黑人扣出来。保存为图片就可以了
    MatchTemplate会找出匹配最高的点。然后给出坐标,这样,我们就可以算出小黑人的中心位置了

    复制代码
    var tempGrayPath = Path.Combine(AppDomain.CurrentDomain.BaseDirectory, "Template", "Current.png");
    
                var tempGrayImg = new Image<Rgb, byte>(tempGrayPath);
    
                var match = img.MatchTemplate(tempGrayImg, TemplateMatchingType.CcorrNormed);
    
                double min = 0, max = 0;
                Point maxp = new Point(0, 0);//最好匹配的点
                Point minp = new Point(0, 0);
                CvInvoke.MinMaxLoc(match, ref min, ref max, ref minp, ref maxp);
                Console.WriteLine(min + " " + max);
                CvInvoke.Rectangle(img, new Rectangle(maxp, new Size(tempGrayImg.Width, tempGrayImg.Height)), new MCvScalar(0, 0, 255), 3);
    
                var startPoint = new Point();
                startPoint.X = maxp.X + (int)(tempGrayImg.Width / 2.0);
                startPoint.Y = maxp.Y + tempGrayImg.Height - 2;
                CvInvoke.Rectangle(img, new Rectangle(startPoint, new Size(1, 1)), new MCvScalar(0, 0, 0), 3);
    复制代码


    4。目标位置计算,
    这也是程序最复杂的部分了,
    我的实现步骤为
    1:先把图片裁剪到只保留中间的1/3有效分析区域
    2:看小黑人在屏幕的左边还是右边,那么目标就会在相反的区域。这样我们就可以把目标区域的图片剪切下来

    ////裁剪查找区域
                ////原图片1/3以下,小黑人以上
                var newImgStart = imgHeightSplit;
                var newImgEnd = maxp.Y + tempGrayImg.Height;
                var newImgHeight = newImgEnd - newImgStart;
                Rectangle rect = new Rectangle(0, newImgStart, img.Width, newImgHeight);
    
                CvInvoke.cvSetImageROI(sourceImg, rect);
                var newImg = new Image<Rgb, byte>(sourceImg.Width, newImgHeight);
                CvInvoke.cvCopy(sourceImg, newImg, IntPtr.Zero);
    
    
    
                ////看小黑人在程序的左边还是右边
                ////如果在左边,那目标点就在图片的右边
                bool targetInLeft = true;
                if (maxp.X < imgWidthCenter) targetInLeft = false;
    
                Rectangle halfRect;
                if (targetInLeft)
                    halfRect = new Rectangle(0, 0, imgWidthCenter, newImgHeight);
                else
                    halfRect = new Rectangle(imgWidthCenter, 0, imgWidthCenter, newImgHeight);
    
                CvInvoke.cvSetImageROI(newImg, halfRect);
                var halfImg = new Image<Rgb, byte>(imgWidthCenter, newImgHeight);
                CvInvoke.cvCopy(newImg, halfImg, IntPtr.Zero);
    View Code

    5。然后我们通过像素分析,找到目标的顶点
    原理是:第一个点与后一个点对比,看变化大小
    如果变化大小超过一个值。就认为是目标位了(跳一跳背景是渐变的)
    这里是方块点。顶点就是一个点。当如果目标为圆体的时候
    那顶度也能有几个像素的Y轴都是相同的。那么我们要把有几个相同的找出来。取中间位置,算为顶点

    复制代码
    Point topPoint = new Point();
                for (int i = 0; i < halfImg.Rows; i++)
                {
                    for (int j = 0; j < halfImg.Cols - 1; j++)
                    {
                        var cur = halfImg[i, j];
                        var next = halfImg[i, j + 1];
                        if (Math.Abs(RgbHelp.GetDiff(cur, next)) > 2)
                        {
                            var x = 2;
                            next = halfImg[i, j + x];
                            while (Math.Abs(RgbHelp.GetDiff(cur, next)) > 2)
                            {
                                x++;
                                next = halfImg[i, j + x];
                            }
                            topPoint.Y = i;
                            topPoint.X = j + (int)(x / 2.0);
                            break;
                        }
                    }
                    if (!topPoint.IsEmpty) break;
                }
                CvInvoke.Rectangle(halfImg, new Rectangle(topPoint, new Size(1, 1)), new MCvScalar(0, 0, 255), 3);
    
                ////这个顶点在原图中的位置
                var oldTopX = topPoint.X;
                if (!targetInLeft) oldTopX += imgWidthCenter;
                var oldTopY = topPoint.Y + imgHeightSplit;
                var oldTopPoint = new Point(oldTopX, oldTopY);
                CvInvoke.Rectangle(img, new Rectangle(oldTopPoint, new Size(1, 1)), new MCvScalar(0, 0, 255), 3);
    复制代码

    找到了相关的点。计算小黑人与目标的距离就不是难事了
    然后就是发送跳的命令,一个步骤就完成了



    出处:http://www.cnblogs.com/liuju150/p/WeChat-AutoJump_Net-OpenCV.html

  • 相关阅读:
    Fast RCNN 训练自己数据集 (2修改数据读取接口)
    Caffe Python MemoryDataLayer Segmentation Fault
    Caffe 单独测试添加的layer
    Caffe源码解析7:Pooling_Layer
    Caffe源码解析6:Neuron_Layer
    Caffe源码解析5:Conv_Layer
    Caffe源码解析4: Data_layer
    Caffe源码解析3:Layer
    Caffe源码解析2:SycedMem
    Raft论文学习笔记
  • 原文地址:https://www.cnblogs.com/mq0036/p/8287538.html
Copyright © 2011-2022 走看看