-
密码忘记了?没事,我早就用Python给你监听了
使用opencv实现
监听按键
a = cv2.imread(path+file) cv2.imshow('a',a) k = cv2.waitKey(10) & 0xFF if k ==13: cv2.waitKey() elif k==ord('m') : cv2.waitKey()
需要注意的是必须使用cv加载图像,只有点击图像窗口才能侦听点击窗口时所使用的按键
很多人学习蟒蛇,不知道从何学起。 很多人学习python,掌握了基本语法之后,不知道在哪里寻找案例上手。 很多已经做了案例的人,却不知道如何去学习更多高深的知识。 那么针对这三类人,我给大家提供一个好的学习平台,免费获取视频教程,电子书,以及课程的源代码! QQ群:101677771 欢迎加入,一起讨论一起学习!
监听鼠标
函数:cv2.setMouseCallback()
点击鼠标后的回调函数
格式都是统一的,不同的是调用后的功能
def mouse_callback(event,x,y,flags,param):
定义完成后需要注册该回调函数
cv2.setMouseCallback(windowName,mouse_callback)
鼠标事件
鼠标标志
案例
#mouse callback function def draw_circle(event,x,y,flags,param): if event==cv2.EVENT_LBUTTONDBLCLK: # cv2.circle(img,(x,y),50,(255,0,255),-1) print('坐标x=:{0},y=:{1}'.format(x,y)) # 创建图像与窗口并将窗口与回调函数绑定 img=np.zeros((512,512,3),np.uint8) cv2.namedWindow('image') cv2.setMouseCallback('image',draw_circle) while(1): cv2.imshow('image',img) if cv2.waitKey(20)&0xFF==27: break
常用操作:
1、滚轮上下滑动操作为 if event==cv2.EVENT_MOUSEWHEEL,这条命令判断鼠标滚轮是否滑动。要想知道是上滑还是下滑,还要加一个判断flags>0,滚轮上滑;否则flags<0,滚轮下滑。
2、点击鼠标左键操作为 if event==cv2.EVENT_LBUTTONDOWN
3、按住ctrl键,点击鼠标左键的操作是 if
eventcv2.EVENT_LBUTTONDOWN and flags
cv2.EVENT_FLAG_CTRLKEY+cv2.EVENT_LBUTTONDOWN
使用pyautogui实现
使用这个函数注意,很多时候满足不了实际需求,建议修改源码,修改后十分强大
返回当前鼠标位置
screenWidth, screenHeight = pyautogui.size() # 屏幕尺寸 mouseX, mouseY = pyautogui.position() # 返回当前鼠标位置,注意坐标系统中左上方是(0, 0) # 判断(x,y)是否在屏幕上 x, y = 122, 244 pyautogui.onScreen(x, y) # 结果为true
设置操作间隔和强制停止事件
pyautogui.PAUSE = 1.5 # 每个函数执行后停顿1.5秒 pyautogui.FAILSAFE = True # 鼠标移到左上角会触发FailSafeException,因此快速移动鼠标到左上角也可以停止
鼠标移动
注意带rel的是相对位置,不要理解为绝对位置
w, h = pyautogui.size() pyautogui.moveTo(w/2, h/2) # 基本移动 pyautogui.moveTo(100, 200, duration=2) # 移动过程持续2s完成 pyautogui.moveTo(None, 500) # X方向不变,Y方向移动到500 pyautogui.moveRel(-40, 500) # 相对位置移动 # 缓动/渐变函数可以改变光标移动过程的速度和方向。通常鼠标是匀速直线运动,这就是线性缓动/渐变函数。 # PyAutoGUI有30种缓动/渐变函数,可以通过pyautogui.ease*?查看。 # 开始很慢,不断加速 pyautogui.moveTo(100, 100, 2, pyautogui.easeInQuad) # 开始很快,不断减速 pyautogui.moveTo(100, 100, 2, pyautogui.easeOutQuad) # 开始和结束都快,中间比较慢 pyautogui.moveTo(100, 100, 2, pyautogui.easeInOutQuad) # 一步一徘徊前进 pyautogui.moveTo(100, 100, 2, pyautogui.easeInBounce) # 徘徊幅度更大,甚至超过起点和终点 pyautogui.moveTo(100, 100, 2, pyautogui.easeInElastic)
鼠标拖动
# 点击+向下拖动 pyautogui.click(941, 34, button='left') pyautogui.dragRel(0, 100, button='left', duration=5)
鼠标点击
pyautogui.click(300, 400, button='right') # 包含了move的点击,右键 pyautogui.click(clicks=2, interval=0.25) # 双击,间隔0.25s # 其中,button属性可以设置成left,middle和right。 pyautogui.click(10, 20, 2, 0.25, button='left') pyautogui.click(x=100, y=200, duration=2) # 先移动到(100, 200)再单击 pyautogui.click() # 鼠标当前位置点击一下 pyautogui.doubleClick() # 鼠标当前位置左击两下 pyautogui.doubleClick(x=100, y=150, button="left") # 鼠标在(100,150)位置左击两下 pyautogui.tripleClick() # 鼠标当前位置左击三下 pyautogui.mouseDown() # 鼠标左键按下再松开 pyautogui.mouseUp() pyautogui.mouseDown(button='right') # 按下鼠标右键 pyautogui.mouseUp(button='right', x=100, y=200) # 移动到(100, 200)位置,然后松开鼠标右键 # scroll函数控制鼠标滚轮的滚动,amount_to_scroll参数表示滚动的格数。正数则页面向上滚动,负数则向下滚动 # pyautogui.scroll(clicks=amount_to_scroll, x=moveToX, y=moveToY) pyautogui.scroll(5, 20, 2) pyautogui.scroll(10) # 向上滚动10格 pyautogui.scroll(-10) # 向下滚动10格 pyautogui.scroll(10, x=100, y=100) # 移动到(100, 100)位置再向上滚动10格
鼠标获取所点击位置的rgb颜色
positionStr = '鼠标坐标点(X,Y)为:{},{}'.format(str(x).rjust(4), str(y).rjust(4)) pix = pyautogui.screenshot().getpixel((x, y)) # 获取鼠标所在屏幕点的RGB颜色 positionStr += ' RGB:(' + str(pix[0]).rjust(3) + ',' + str(pix[1]).rjust(3) + ',' + str(pix[2]).rjust( 3) + ')' print(positionStr)
鼠标滚轮
pyautogui.scroll(-10)
键盘输入文字
限制英文
pyautogui.click(1279, 374) pyautogui.typewrite('hello world!')
控制键盘输入单个字符
pyautogui.press('shift') # 切换输入法的中英文
设置键盘按压组合键
pyautogui.hotkey('shift', 'a') # 可以使用组合键,本质上是
键盘使用方法
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
|
import pyautogui pyautogui.typewrite( 'Hello world!' ) # 输入Hello world!字符串 pyautogui.typewrite( 'Hello world!' , interval = 0.25 ) # 每次输入间隔0.25秒,输入Hello world! pyautogui.press( 'enter' ) # 按下并松开(轻敲)回车键 pyautogui.press([ 'left' , 'left' , 'left' , 'left' ]) # 按下并松开(轻敲)四下左方向键 pyautogui.keyDown( 'shift' ) # 按下`shift`键 pyautogui.keyUp( 'shift' ) # 松开`shift`键 pyautogui.keyDown( 'shift' ) pyautogui.press( '4' ) pyautogui.keyUp( 'shift' ) # 输出 $ 符号的按键 pyautogui.hotkey( 'ctrl' , 'v' ) # 组合按键(Ctrl+V),粘贴功能,按下并松开'ctrl'和'v'按键 # pyautogui.KEYBOARD_KEYS数组中就是press(),keyDown(),keyUp()和hotkey()函数可以输入的按键名称 pyautogui.KEYBOARD_KEYS = [ '\t' , '\n' , '\r' , ' ' , '!' , '"' , '#' , '$' , '%' , '&' , " '", ' ( ', ' ) ', ' * ', ' + ', ' , ', ' - ', ' .', '/' , '0' , '1' , '2' , '3' , '4' , '5' , '6' , '7' , '8' , '9' , ':' , ';' , '<' , '=' , '>' , '?' , '@' , '[' , '\\', ' ] ', ' ^ ', ' _ ', ' ` ', ' a ', ' b ', ' c ', ' d ', ' e ', ' f ', ' g ', ' h ', ' i ', ' j ', ' k ', ' l', 'm' , 'n' , 'o' , 'p' , 'q' , 'r' , 's' , 't' , 'u' , 'v' , 'w' , 'x' , 'y' , 'z' , '{' , '|' , '}' , '~' , 'accept' , 'add' , 'alt' , 'altleft' , 'altright' , 'apps' , 'backspace' , 'browserback' , 'browserfavorites' , 'browserforward' , 'browserhome' , 'browserrefresh' , 'browsersearch' , 'browserstop' , 'capslock' , 'clear' , 'convert' , 'ctrl' , 'ctrlleft' , 'ctrlright' , 'decimal' , 'del' , 'delete' , 'divide' , 'down' , 'end' , 'enter' , 'esc' , 'escape' , 'execute' , 'f1' , 'f10' , 'f11' , 'f12' , 'f13' , 'f14' , 'f15' , 'f16' , 'f17' , 'f18' , 'f19' , 'f2' , 'f20' , 'f21' , 'f22' , 'f23' , 'f24' , 'f3' , 'f4' , 'f5' , 'f6' , 'f7' , 'f8' , 'f9' , 'final' , 'fn' , 'hanguel' , 'hangul' , 'hanja' , 'help' , 'home' , 'insert' , 'junja' , 'kana' , 'kanji' , 'launchapp1' , 'launchapp2' , 'launchmail' , 'launchmediaselect' , 'left' , 'modechange' , 'multiply' , 'nexttrack' , 'nonconvert' , 'num0' , 'num1' , 'num2' , 'num3' , 'num4' , 'num5' , 'num6' , 'num7' , 'num8' , 'num9' , 'numlock' , 'pagedown' , 'pageup' , 'pause' , 'pgdn' , 'pgup' , 'playpause' , 'prevtrack' , 'print' , 'printscreen' , 'prntscrn' , 'prtsc' , 'prtscr' , 'return' , 'right' , 'scrolllock' , 'select' , 'separator' , 'shift' , 'shiftleft' , 'shiftright' , 'sleep' , 'space' , 'stop' , 'subtract' , 'tab' , 'up' , 'volumedown' , 'volumemute' , 'volumeup' , 'win' , 'winleft' , 'winright' , 'yen' , 'command' , 'option' , 'optionleft' , 'optionright' ] |
使用pyautogui弹窗
import pyautogui # 显示一个简单的带文字和OK按钮的消息弹窗。用户点击后返回button的文字。 pyautogui.alert(text='', title='', button='OK') b = pyautogui.alert(text='要开始程序么?', title='请求框', button='OK') print(b) # 输出结果为OK # 显示一个简单的带文字、OK和Cancel按钮的消息弹窗,用户点击后返回被点击button的文字,支持自定义数字、文字的列表。 pyautogui.confirm(text='', title='', buttons=['OK', 'Cancel']) # OK和Cancel按钮的消息弹窗 pyautogui.confirm(text='', title='', buttons=range(10)) # 10个按键0-9的消息弹窗 a = pyautogui.confirm(text='', title='', buttons=range(10)) print(a) # 输出结果为你选的数字 # 可以输入的消息弹窗,带OK和Cancel按钮。用户点击OK按钮返回输入的文字,点击Cancel按钮返回None。 pyautogui.prompt(text='', title='', default='') # 样式同prompt(),用于输入密码,消息用*表示。带OK和Cancel按钮。用户点击OK按钮返回输入的文字,点击Cancel按钮返回None。 pyautogui.password(text='', title='', default='', mask='*') 使用pyautogui操作图像 import pyautogui pyautogui.screenshot(r'C:\Users\ZDH\Desktop\PY\my_screenshot.png') # 截全屏并设置保存图片的位置和名称 im = pyautogui.screenshot(r'C:\Users\ZDH\Desktop\PY\my_screenshot.png') # 截全屏并设置保存图片的位置和名称 print(im) # 打印图片的属性 # 不截全屏,截取区域图片。截取区域region参数为:左上角XY坐标值、宽度和高度 pyautogui.screenshot(r'C:\Users\ZDH\Desktop\PY\region_screenshot.png', region=(0, 0, 300, 400)) pix = pyautogui.screenshot().getpixel((220, 200)) # 获取坐标(220,200)所在屏幕点的RGB颜色 positionStr = ' RGB:(' + str(pix[0]).rjust(3) + ',' + str(pix[1]).rjust(3) + ',' + str(pix[2]).rjust(3) + ')' print(positionStr) # 打印结果为RGB:( 60, 63, 65) pix = pyautogui.pixel(220, 200) # 获取坐标(220,200)所在屏幕点的RGB颜色与上面三行代码作用一样 positionStr = ' RGB:(' + str(pix[0]).rjust(3) + ',' + str(pix[1]).rjust(3) + ',' + str(pix[2]).rjust(3) + ')' print(positionStr) # 打印结果为RGB:( 60, 63, 65) # 如果你只是要检验一下指定位置的像素值,可以用pixelMatchesColor(x,y,RGB)函数,把X、Y和RGB元组值穿入即可 # 如果所在屏幕中(x,y)点的实际RGB三色与函数中的RGB一样就会返回True,否则返回False # tolerance参数可以指定红、绿、蓝3种颜色误差范围 pyautogui.pixelMatchesColor(100, 200, (255, 255, 255)) pyautogui.pixelMatchesColor(100, 200, (255, 255, 245), tolerance=10) # 获得文件图片在现在的屏幕上面的坐标,返回的是一个元组(top, left, width, height) # 如果截图没找到,pyautogui.locateOnScreen()函数返回None a = pyautogui.locateOnScreen(r'C:\Users\ZDH\Desktop\PY\region_screenshot.png') print(a) # 打印结果为Box(left=0, top=0, width=300, height=400) x, y = pyautogui.center(a) # 获得文件图片在现在的屏幕上面的中心坐标 print(x, y) # 打印结果为150 200 x, y = pyautogui.locateCenterOnScreen(r'C:\Users\ZDH\Desktop\PY\region_screenshot.png') # 这步与上面的四行代码作用一样 print(x, y) # 打印结果为150 200 # 匹配屏幕所有与目标图片的对象,可以用for循环和list()输出 pyautogui.locateAllOnScreen(r'C:\Users\ZDH\Desktop\PY\region_screenshot.png') for pos in pyautogui.locateAllOnScreen(r'C:\Users\ZDH\Desktop\PY\region_screenshot.png'): print(pos) # 打印结果为Box(left=0, top=0, width=300, height=400) a = list(pyautogui.locateAllOnScreen(r'C:\Users\ZDH\Desktop\PY\region_screenshot.png')) print(a) # 打印结果为[Box(left=0, top=0, width=300, height=400)]
出 处:https://www.cnblogs.com/pythonQqun200160592/p/15683068.html