使用opencv實作
監聽按鍵
a = cv2.imread(path+file) cv2.imshow('a',a) k = cv2.waitKey(10) & 0xFF if k ==13: cv2.waitKey() elif k==ord('m') : cv2.waitKey()
需要注意的是必須使用cv加載影像，只有點擊影像視窗才能偵聽點擊視窗時所使用的按鍵
很多人學習蟒蛇，不知道從何學起， 很多人學習python，掌握了基本語法之后，不知道在哪里尋找案例上手， 很多已經做了案例的人，卻不知道如何去學習更多高深的知識， 那么針對這三類人，我給大家提供一個好的學習平臺，免費獲取視頻教程，電子書，以及課程的源代碼！ QQ群：101677771 歡迎加入，一起討論一起學習！
監聽滑鼠
函式：cv2.setMouseCallback()
點擊滑鼠后的回呼函式
格式都是統一的，不同的是呼叫后的功能
def mouse_callback(event,x,y,flags,param):
定義完成后需要注冊該回呼函式
cv2.setMouseCallback(windowName,mouse_callback)
滑鼠事件
滑滑鼠志
案例
#mouse callback function def draw_circle(event,x,y,flags,param): if event==cv2.EVENT_LBUTTONDBLCLK: # cv2.circle(img,(x,y),50,(255,0,255),-1) print('坐標x=：{0},y=:{1}'.format(x,y)) # 創建影像與視窗并將視窗與回呼函式系結 img=np.zeros((512,512,3),np.uint8) cv2.namedWindow('image') cv2.setMouseCallback('image',draw_circle) while(1): cv2.imshow('image',img) if cv2.waitKey(20)&0xFF==27: break
常用操作：
1、滾輪上下滑動操作為 if event==cv2.EVENT_MOUSEWHEEL，這條命令判斷滑鼠滾輪是否滑動，要想知道是上滑還是下滑，還要加一個判斷flags>0,滾輪上滑；否則flags<0,滾輪下滑，
2、點擊滑鼠左鍵操作為 if event==cv2.EVENT_LBUTTONDOWN
3、按住ctrl鍵，點擊滑鼠左鍵的操作是 if
eventcv2.EVENT_LBUTTONDOWN and flags
cv2.EVENT_FLAG_CTRLKEY+cv2.EVENT_LBUTTONDOWN
使用pyautogui實作
使用這個函式注意，很多時候滿足不了實際需求，建議修改原始碼，修改后十分強大
回傳當前滑鼠位置
screenWidth, screenHeight = pyautogui.size() # 螢屏尺寸 mouseX, mouseY = pyautogui.position() # 回傳當前滑鼠位置，注意坐標系統中左上方是(0, 0) # 判斷(x,y)是否在螢屏上 x, y = 122, 244 pyautogui.onScreen(x, y) # 結果為true
設定操作間隔和強制停止事件
pyautogui.PAUSE = 1.5 # 每個函式執行后停頓1.5秒 pyautogui.FAILSAFE = True # 滑鼠移到左上角會觸發FailSafeException，因此快速移動滑鼠到左上角也可以停止
滑鼠移動
注意帶rel的是相對位置，不要理解為絕對位置
w, h = pyautogui.size() pyautogui.moveTo(w/2, h/2) # 基本移動 pyautogui.moveTo(100, 200, duration=2) # 移動程序持續2s完成 pyautogui.moveTo(None, 500) # X方向不變，Y方向移動到500 pyautogui.moveRel(-40, 500) # 相對位置移動 # 緩動/漸變函式可以改變游標移動程序的速度和方向，通常滑鼠是勻速直線運動，這就是線性緩動/漸變函式， # PyAutoGUI有30種緩動/漸變函式，可以通過pyautogui.ease*?查看， # 開始很慢，不斷加速 pyautogui.moveTo(100, 100, 2, pyautogui.easeInQuad) # 開始很快，不斷減速 pyautogui.moveTo(100, 100, 2, pyautogui.easeOutQuad) # 開始和結束都快，中間比較慢 pyautogui.moveTo(100, 100, 2, pyautogui.easeInOutQuad) # 一步一徘徊前進 pyautogui.moveTo(100, 100, 2, pyautogui.easeInBounce) # 徘徊幅度更大，甚至超過起點和終點 pyautogui.moveTo(100, 100, 2, pyautogui.easeInElastic)
滑鼠拖動
# 點擊+向下拖動 pyautogui.click(941, 34, button='left') pyautogui.dragRel(0, 100, button='left', duration=5)
滑鼠點擊
pyautogui.click(300, 400, button='right') # 包含了move的點擊，右鍵 pyautogui.click(clicks=2, interval=0.25) # 雙擊，間隔0.25s # 其中，button屬性可以設定成left，middle和right， pyautogui.click(10, 20, 2, 0.25, button='left') pyautogui.click(x=100, y=200, duration=2) # 先移動到(100, 200)再單擊 pyautogui.click() # 滑鼠當前位置點擊一下 pyautogui.doubleClick() # 滑鼠當前位置左擊兩下 pyautogui.doubleClick(x=100, y=150, button="left") # 滑鼠在（100，150）位置左擊兩下 pyautogui.tripleClick() # 滑鼠當前位置左擊三下 pyautogui.mouseDown() # 滑鼠左鍵按下再松開 pyautogui.mouseUp() pyautogui.mouseDown(button='right') # 按下滑鼠右鍵 pyautogui.mouseUp(button='right', x=100, y=200) # 移動到(100, 200)位置，然后松開滑鼠右鍵 # scroll函式控制滑鼠滾輪的滾動，amount_to_scroll引數表示滾動的格數，正數則頁面向上滾動，負數則向下滾動 # pyautogui.scroll(clicks=amount_to_scroll, x=moveToX, y=moveToY) pyautogui.scroll(5, 20, 2) pyautogui.scroll(10) # 向上滾動10格 pyautogui.scroll(-10) # 向下滾動10格 pyautogui.scroll(10, x=100, y=100) # 移動到(100, 100)位置再向上滾動10格
滑鼠獲取所點擊位置的rgb顏色
positionStr = '滑鼠坐標點（X,Y）為：{},{}'.format(str(x).rjust(4), str(y).rjust(4)) pix = pyautogui.screenshot().getpixel((x, y)) # 獲取滑鼠所在螢屏點的RGB顏色 positionStr += ' RGB:(' + str(pix[0]).rjust(3) + ',' + str(pix[1]).rjust(3) + ',' + str(pix[2]).rjust( 3) + ')' print(positionStr)
滑鼠滾輪
pyautogui.scroll(-10)
鍵盤輸入文字
限制英文
pyautogui.click(1279, 374) pyautogui.typewrite('hello world!')
控制鍵盤輸入單個字符
pyautogui.press('shift') # 切換輸入法的中英文
設定鍵盤按壓組合鍵
pyautogui.hotkey('shift', 'a') # 可以使用組合鍵，本質上是
鍵盤使用方法
import pyautogui
pyautogui.typewrite('Hello world!') # 輸入Hello world!字串
pyautogui.typewrite('Hello world!', interval=0.25) # 每次輸入間隔0.25秒，輸入Hello world!
pyautogui.press('enter') # 按下并松開（輕敲）回車鍵
pyautogui.press(['left', 'left', 'left', 'left']) # 按下并松開（輕敲）四下左方向鍵
pyautogui.keyDown('shift') # 按下`shift`鍵
pyautogui.keyUp('shift') # 松開`shift`鍵
pyautogui.keyDown('shift')
pyautogui.press('4')
pyautogui.keyUp('shift') # 輸出 $ 符號的按鍵
pyautogui.hotkey('ctrl', 'v') # 組合按鍵（Ctrl+V），粘貼功能，按下并松開'ctrl'和'v'按鍵
# pyautogui.KEYBOARD_KEYS陣列中就是press()，keyDown()，keyUp()和hotkey()函式可以輸入的按鍵名稱
pyautogui.KEYBOARD_KEYS = ['\t', '\n', '\r', ' ', '!', '"', '#', '$', '%', '&', "'", '(', ')', '*', '+', ',', '-', '.',
'/', '0', '1', '2', '3', '4', '5', '6', '7', '8', '9', ':', ';', '<', '=', '>', '?', '@',
'[', '\\', ']', '^', '_', '`', 'a', 'b', 'c', 'd', 'e', 'f', 'g', 'h', 'i', 'j', 'k', 'l',
'm', 'n', 'o', 'p', 'q', 'r', 's', 't', 'u', 'v', 'w', 'x', 'y', 'z', '{', '|', '}', '~',
'accept', 'add', 'alt', 'altleft', 'altright', 'apps', 'backspace', 'browserback',
'browserfavorites', 'browserforward', 'browserhome', 'browserrefresh', 'browsersearch',
'browserstop', 'capslock', 'clear', 'convert', 'ctrl', 'ctrlleft', 'ctrlright', 'decimal',
'del', 'delete', 'divide', 'down', 'end', 'enter', 'esc', 'escape', 'execute', 'f1', 'f10',
'f11', 'f12', 'f13', 'f14', 'f15', 'f16', 'f17', 'f18', 'f19', 'f2', 'f20', 'f21', 'f22',
'f23', 'f24', 'f3', 'f4', 'f5', 'f6', 'f7', 'f8', 'f9', 'final', 'fn', 'hanguel', 'hangul',
'hanja', 'help', 'home', 'insert', 'junja', 'kana', 'kanji', 'launchapp1', 'launchapp2',
'launchmail', 'launchmediaselect', 'left', 'modechange', 'multiply', 'nexttrack',
'nonconvert', 'num0', 'num1', 'num2', 'num3', 'num4', 'num5', 'num6', 'num7', 'num8', 'num9',
'numlock', 'pagedown', 'pageup', 'pause', 'pgdn', 'pgup', 'playpause', 'prevtrack', 'print',
'printscreen', 'prntscrn', 'prtsc', 'prtscr', 'return', 'right', 'scrolllock', 'select',
'separator', 'shift', 'shiftleft', 'shiftright', 'sleep', 'space', 'stop', 'subtract', 'tab',
'up', 'volumedown', 'volumemute', 'volumeup', 'win', 'winleft', 'winright', 'yen', 'command',
'option', 'optionleft', 'optionright']
使用pyautogui彈窗
import pyautogui # 顯示一個簡單的帶文字和OK按鈕的訊息彈窗，用戶點擊后回傳button的文字， pyautogui.alert(text='', title='', button='OK') b = pyautogui.alert(text='要開始程式么？', title='請求框', button='OK') print(b) # 輸出結果為OK # 顯示一個簡單的帶文字、OK和Cancel按鈕的訊息彈窗，用戶點擊后回傳被點擊button的文字，支持自定義數字、文字的串列， pyautogui.confirm(text='', title='', buttons=['OK', 'Cancel']) # OK和Cancel按鈕的訊息彈窗 pyautogui.confirm(text='', title='', buttons=range(10)) # 10個按鍵0-9的訊息彈窗 a = pyautogui.confirm(text='', title='', buttons=range(10)) print(a) # 輸出結果為你選的數字 # 可以輸入的訊息彈窗，帶OK和Cancel按鈕，用戶點擊OK按鈕回傳輸入的文字，點擊Cancel按鈕回傳None， pyautogui.prompt(text='', title='', default='') # 樣式同prompt()，用于輸入密碼，訊息用*表示，帶OK和Cancel按鈕，用戶點擊OK按鈕回傳輸入的文字，點擊Cancel按鈕回傳None， pyautogui.password(text='', title='', default='', mask='*') 使用pyautogui操作影像 import pyautogui pyautogui.screenshot(r'C:\Users\ZDH\Desktop\PY\my_screenshot.png') # 截全屏并設定保存圖片的位置和名稱 im = pyautogui.screenshot(r'C:\Users\ZDH\Desktop\PY\my_screenshot.png') # 截全屏并設定保存圖片的位置和名稱 print(im) # 列印圖片的屬性 # 不截全屏，截取區域圖片，截取區域region引數為：左上角XY坐標值、寬度和高度 pyautogui.screenshot(r'C:\Users\ZDH\Desktop\PY\region_screenshot.png', region=(0, 0, 300, 400)) pix = pyautogui.screenshot().getpixel((220, 200)) # 獲取坐標(220,200)所在螢屏點的RGB顏色 positionStr = ' RGB:(' + str(pix[0]).rjust(3) + ',' + str(pix[1]).rjust(3) + ',' + str(pix[2]).rjust(3) + ')' print(positionStr) # 列印結果為RGB:( 60, 63, 65) pix = pyautogui.pixel(220, 200) # 獲取坐標(220,200)所在螢屏點的RGB顏色與上面三行代碼作用一樣 positionStr = ' RGB:(' + str(pix[0]).rjust(3) + ',' + str(pix[1]).rjust(3) + ',' + str(pix[2]).rjust(3) + ')' print(positionStr) # 列印結果為RGB:( 60, 63, 65) # 如果你只是要檢驗一下指定位置的像素值，可以用pixelMatchesColor(x,y,RGB)函式，把X、Y和RGB元組值穿入即可 # 如果所在螢屏中(x,y)點的實際RGB三色與函式中的RGB一樣就會回傳True，否則回傳False # tolerance引數可以指定紅、綠、藍3種顏色誤差范圍 pyautogui.pixelMatchesColor(100, 200, (255, 255, 255)) pyautogui.pixelMatchesColor(100, 200, (255, 255, 245), tolerance=10) # 獲得檔案圖片在現在的螢屏上面的坐標，回傳的是一個元組(top, left, width, height) # 如果截圖沒找到，pyautogui.locateOnScreen()函式回傳None a = pyautogui.locateOnScreen(r'C:\Users\ZDH\Desktop\PY\region_screenshot.png') print(a) # 列印結果為Box(left=0, top=0, width=300, height=400) x, y = pyautogui.center(a) # 獲得檔案圖片在現在的螢屏上面的中心坐標 print(x, y) # 列印結果為150 200 x, y = pyautogui.locateCenterOnScreen(r'C:\Users\ZDH\Desktop\PY\region_screenshot.png') # 這步與上面的四行代碼作用一樣 print(x, y) # 列印結果為150 200 # 匹配螢屏所有與目標圖片的物件，可以用for回圈和list()輸出 pyautogui.locateAllOnScreen(r'C:\Users\ZDH\Desktop\PY\region_screenshot.png') for pos in pyautogui.locateAllOnScreen(r'C:\Users\ZDH\Desktop\PY\region_screenshot.png'): print(pos) # 列印結果為Box(left=0, top=0, width=300, height=400) a = list(pyautogui.locateAllOnScreen(r'C:\Users\ZDH\Desktop\PY\region_screenshot.png')) print(a) # 列印結果為[Box(left=0, top=0, width=300, height=400)]
轉載請註明出處，本文鏈接：https://www.uj5u.com/houduan/380186.html
標籤：Python