用python寫游戲腳本原來這么簡單
前言
當然，本篇文章不是要講Airtest這個怎么用，而是用原始的python+opencv來實現(xiàn)上面的操作。
這兩天我寫了一個公主連結刷初始號的程序，也不能算寫游戲腳本的老手，這篇文章主要是分享一些基礎的技術和使用上的心得吧。
準備工作
首先，我們要完成以下準備。
安卓設備一個：模擬器或者真機都可以。
安裝ADB，并添加到系統(tǒng)的PATH里：adb是用來
安裝tesseract-ocr，并添加到系統(tǒng)的PATH里：幫助我們實現(xiàn)簡單的字符識別
安裝python3.7以上的版本
這里adb和tesseract我放在百度網盤里了，里面順便放了一個錄制的效果視頻。
鏈接：pan.baidu.com/s/1edTPu2o7… 提取碼：33aw
python庫安裝
pipinstall pillow pytesseract opencv-python復制代碼
除此以外，如果有需要可以安裝uiautomator2，這篇文章就不涉及這塊知識了。
使用adb獲取安卓設備
這里我們主要是涉及到單個安卓設備的ADB連接操作，首先我們打開模擬器。
然后我們調用adb devices來獲取當前的安卓設備，我這里是一個模擬器。
接下來可以調用adb shell測試一下是否能進入到安卓設備的shell環(huán)境下，確認可以輸入exit退出即可。
如果有的時候進不了shell，可以先調用一下adb kill-server，然后再調用adb devices。
可能常用的ADB Shell命令
接下來是一些ADB的命令操作。通過adb命令，我們可以用python來操作的安卓設備。
屏幕截圖
最常見的操作就是截圖了，先調用screencap截圖放到安卓設備里，然后再把截圖下拉到電腦。
def take_screenshot():os.system("adb shell screencap -p /data/screenshot.png")????os.system("adb?pull?/data/screenshot.png?./tmp.png")
下拉文件
下拉文件就是剛剛那個adb pull了，以公主連結為例，以下代碼可以導出賬號信息的xml，以后通過xml就可以登錄了。
os.system(f"adb?pull?/data/data/tw.sonet.princessconnect/shared_prefs/tw.sonet.princessconnect.v2.playerprefs.xml?./user_info.xml")上傳文件
有了下拉自然就有上傳了，通過adb push即可完成。以公主連結為例，以下代碼可以完成賬號的切換。
# 切換賬號1os.system("adb push ./user_info1.xml /data/data/tw.sonet.princessconnect/shared_prefs/tw.sonet.princessconnect.v2.playerprefs.xml")# 切換賬號2os.system("adb?push?./user_info2.xml?/data/data/tw.sonet.princessconnect/shared_prefs/tw.sonet.princessconnect.v2.playerprefs.xml")
點擊屏幕某個位置
def adb_click(center, offset=(0, 0)):(x, y) = centerx += offset[0]y += offset[1]????os.system(f"adb?shell?input?tap?{x}?{y}")
輸入文字
text = "YourPassword"os.system(f"adb shell input text {text}")
刪除字符
有的時候輸入框會有輸入的緩存，我們需要刪除字符。
# 刪除10個字符for i in range(10):os.system("adb shell input keyevent 67")
查詢當前運行的包名和Activity
通過以下代碼，可以查詢當前運行的程序的Activity，也可以順便查包名。
adb shell dumpsys activity activities
停止某個應用
有時候會需要停止某個應用，需要提供應用的包名。
adb shell am force-stop tw.sonet.princessconnect開啟某個應用
開啟某個應用需要提供包名以及Activity。
adb shell am start -W -n tw.sonet.princessconnect/jp.co.cygames.activity.OverrideUnityActivity圖像操作
對于圖像的操作第一就是圖像查找了，比如說像Airtest提供的這種，無非就是判斷某個圖像在不在截屏中，在的話在什么位置。
除此之外還需要一些摳圖，比如說我們想獲取賬號的id，賬號的等級，需要截取出一部分圖片然后進行OCR操作。
圖像查找
圖像查找其實就是先拿到兩張圖片，然后調用cv2.matchTemplate方法來查找是否存在以及位置，這里匹配是一個相對模糊的匹配，會有一個相似度的概率，最高是1。我們設定一個閾值來判斷模板是否在截屏里即可。
這里截屏如下，文件名為tmp.png：
模板如下：
代碼如下：
import cv2def image_to_position(screen, template):image_x, image_y = template.shape[:2]result = cv2.matchTemplate(screen, template, cv2.TM_CCOEFF_NORMED)min_val, max_val, min_loc, max_loc = cv2.minMaxLoc(result)print("prob:", max_val)if max_val > 0.98:global centercenter = (max_loc[0] + image_y / 2, max_loc[1] + image_x / 2)return centerelse:return Falseif __name__ == "__main__":screen = cv2.imread('tmp.png')template = cv2.imread('Xuandan.png')????print(image_to_position(screen,?template))
運行上述代碼后，可以看到模板匹配出來的概率為0.9977，位置為(1165, 693)，對于一張圖片，左上角為原點，因為我的分辨率是1280 * 720，那么右下角的坐標就是(1280, 720)。可以看到我們這個選單其實就是剛好在右下角的位置。
如何快速裁剪模板？（win10）
游戲腳本其實并不是代碼很難寫，而是需要截很多的圖，這些圖要保證分辨率和原始一樣。我發(fā)現(xiàn)在win10如果用畫圖打開圖片
可以保證使用QQ截屏出來的分辨率，和圖片本身的分辨率一樣。
這個時候直接用qq截屏出來的模板即可直接用于識別。
圖像裁剪
接下來就是有時候需要裁剪一些圖像了，當然我們的模板圖片也可以通過裁剪圖片的方式得到，這樣的模板圖片是最準的。
裁剪其實就是需要裁剪的位置，以及需要的高度和寬度，說白了就是一篇長方形的區(qū)域，下面的代碼使用PIL庫實現(xiàn)。
from PIL import Imagedef crop_screenshot(img_file, pos_x, pos_y, width, height, out_file):img = Image.open(img_file)region = (pos_x, pos_y, pos_x + width, pos_y + height)cropImg = img.crop(region)cropImg.save(out_file)print("exported:", out_file)if __name__ == "__main__":????crop_screenshot("tmp.png",?817,556,?190,?24,?"test_id.png")
上面的代碼以截取玩家的id為例。
運行代碼后，得到截圖如下：
簡單的OCR
得到了以上的圖片信息后就是進行OCR了，也就是光學字符識別。這里代碼非常簡單，只要調用API即可。
from PIL import Imageimport pytesseractimage = Image.open('test_id.png')content = pytesseract.image_to_string(image) # 識別圖片print(content)
不過需要注意的一點就是pytesseract識別出來的結果會有空格符，換行符這樣的符號，真正要用的時候進行一些字符的過濾即可。
The End
這篇文章到這里就結束了，主要還是介紹一些ADB以及圖像相關的基礎操作。謝謝大家的觀看。
原文鏈接：https://juejin.cn/post/6860726908833759239
文章轉載：Python編程學習圈
（版權歸原作者所有，侵刪）
點擊下方“閱讀原文”查看更多