一、GUI控制功能

  • 控制鼠标键盘使用的模块为:pyautogui,这个模块操作起鼠标键盘的时候,非常的迅速,而且如果该模块控制了鼠标后,程序比较难关闭,这时我们有两个方法专门针对以上的情况:

    1、自动防故障功能

    1. pyautogui.FAILSAFE =False
  • 默认这项功能为True, 这项功能意味着:当鼠标的指针在屏幕的最坐上方,程序会报错;目的是为了防止程序无法停止;

    2、停顿功能

    1. pyautogui.PAUSE = 1
  • 意味着所有pyautogui的指令都要暂停一秒;其他指令不会停顿;这样做,可以防止键盘鼠标操作太快;

    二、鼠标移动

    1、控制鼠标移动

    (1)获得屏幕分辨率

    1. print(pyautogui.size()) # 返回所用显示器的分辨率; 输出:Size(width=1920, height=1080)
    2. width,height = pyautogui.size()
    3. print(width,height) # 1920 1080

    (2)移动鼠标

    ① 移动到指定位置

    1. pyautogui.moveTo(100, 300, duration=1)
  • 将鼠标移动到指定的坐标;duration 的作用是设置移动时间,所有的gui函数都有这个参数,而且都是可选参数

    ② 按方向移动(相对移动)

    1. pyautogui.moveRel(100, 500, duration=2) # 第一个参数是左右移动像素值,第二个是上下
  • 相对于当前位置移动光标,向右移动100px,向下移动500px, 这个过程持续 4 秒钟;

    (3)获取鼠标位置

    1. print(pyautogui.position()) # 得到当前鼠标位置;输出:Point(x=200, y=800)

    2、控制鼠标点击

    (1)单击鼠标

    1. # 点击鼠标
    2. pyautogui.click(10, 10) # 鼠标点击指定位置,默认左键
    3. pyautogui.click(10, 10, button='left') # 单击左键
    4. pyautogui.click(1000, 300, button='right') # 单击右键
    5. pyautogui.click(1000, 300, button='middle') # 单击中间

    (2)双击鼠标

    1. pyautogui.doubleClick(10,10) # 指定位置,双击左键
    2. pyautogui.rightClick(10,10) # 指定位置,双击右键
    3. pyautogui.middleClick(10,10) # 指定位置,双击中键

    (3)点击和释放

    1. pyautogui.mouseDown() # 鼠标按下(点击)
    2. pyautogui.mouseUp() # 鼠标释放

    3、控制鼠标拖动

    (1)拖动到指定位置

    1. pyautogui.dragTo(100,300,duration=1)
  • 将鼠标拖动到指定的坐标;duration 的作用是设置移动时间,所有的gui函数都有这个参数,而且都是可选参数;

    (2)按方向拖动(相对拖动)

    1. pyautogui.dragRel(100,500,duration=4) # 第一个参数是左右移动像素值,第二个是上下
  • 相对光标当前为位置向右拖动100px,向下拖动500px, 这个过程持续 4 秒钟;

    4、控制鼠标滚动

  • 控制鼠标滚动的函数是**scroll()**, 传入一个整数的参数,说明向上或向下滚动多少个单位;单位根据操作系统不同而不同;

    1. pyautogui.scroll(300) # 向上滚动300个单位
    2. pyautogui.scroll(-300) # 向下滚动300个单位

    三、屏幕处理

    1、获取屏幕截图

  • 我们控制鼠标的操作,不能盲目的进行,所以我们需要监控屏幕上的内容,从而决定要不要进行对应的操作, pyautogui 提供了一个方法screenshot(),可以返回一个Pillow的image对象;

  • 这里有三个常用函数:

    • **im = pyautogui.screenshot()**:返回屏幕的截图,是一个Pillow的image对象
    • **im.getpixel((500, 500))**:返回im对象上,(500,500)这一点像素的颜色,是一个RGB元组
    • **pyautogui.pixelMatchesColor(500,500,(12,120,400))**:是一个对比函数,对比的是屏幕上(500,500)这一点像素的颜色,与所给的元素是否相同;
      1. im = pyautogui.screenshot()
      2. im.save('屏幕截图.png')
  • 保存屏幕截图

    2、识别图像

  • 首先,我们需要先获得一个屏幕快照,例如我们想要点赞,我们就先把大拇指的图片保存下来;然后使用函数:**locateOnScreen('zan.png')** ,如果可以找到图片,则返回图片的位置,如:**Box(left=25, top=703, width=22, height=22)**;如果找不到图片,则返回None;

  • 如果,屏幕上有多处图片可以匹配,则需要使用**locateAllOnScreen('zan.png')**,如果匹配到多个值,则返回一个list,参考如下: ```python import pyautogui pyautogui.PAUSE = 1

图像识别(一个)

btm = pyautogui.locateOnScreen(‘zan.png’) print(btm) # Box(left=1280, top=344, width=22, height=22)

图像识别(多个)

btm = pyautogui.locateAllOnScreen(‘zan.png’) print(list(btm)) # [Box(left=1280, top=344, width=22, height=22), Box(left=25, top=594, width=22, height=22)]

  1. - `**pyautogui.center((left, top, width, height))**` 返回指定位置的中心点;这样,我们就可以再配合鼠标操作点击找到图片的中心;参考实例:
  2. <a name="wrPiK"></a>
  3. # 四、键盘输入
  4. <a name="AsfEX"></a>
  5. ## 1、键盘输入函数
  6. ```python
  7. pyautogui.keyDown(): 模拟按键按下;
  8. pyautogui.keyUp(): 模拟按键释放;
  9. pyautogui.press(): # 就是调用keyDown() & keyUp(),模拟一次按键;
  10. pyautogui.typewrite('this',0.5) : 第一参数是输入内容,第二个参数是每个字符间的间隔时间;
  11. pyautogui.typewrite(['T','h','i','s']): typewrite 还可以传入单字母的列表;
  • 举例:

    1. pyautogui.keyDown('shift') # 按下shift
    2. pyautogui.press('4') # 按下 4
    3. pyautogui.keyUp('shift') # 释放 shift
  • 输出:$

    1. pyautogui.typewrite('$$$$', 0.5)
  • 输入,每个字符间隔为0.5s

    2、键盘特殊按键

  • 有时我们需要输入一些特殊的按键,比如向左的箭头,这些有相对应的键盘字符串表示,例如:

    1. pyautogui.typewrite(['T','i','s','left','left','h',]) # 输出:This
  • 解释:这里的left就是向左的箭头;诸如此类的键盘字符串,还有很多,参考下表:

image.png

3、快捷键

  • 如果我们需要模拟复制的快捷键 ctrl + c ,如果用前面的方法,则代码为:

    1. pyautogui.keyDown('ctrl')
    2. pyautogui.keyDown('c')
    3. pyautogui.keyUp('c')
    4. pyautogui.keyUp('ctrl')
  • 快捷键的按键与释放顺序非常关键,这时我们可以使用 **pyautogui.hotkey()**,这个函数可以接受多个参数,按传入顺序按下,再按照相反顺序释放。上述快捷键 ctrl + c ,可以将代码变为:

    1. pyautogui.hotkey('ctrl','c')

    五、提示信息框

    1、提示框/警告框

    ```python import pyautogui

a = pyautogui.alert(text=’This is an alert box.’, title=’Test’) print(a)

  1. - 输出如下图:点击确定,返回值为OK
  2. ![image.png](https://cdn.nlark.com/yuque/0/2021/png/2893488/1636897046280-c2c00590-701c-4069-9157-31485cc0650d.png#clientId=u3c8acb62-0669-4&from=paste&id=uf88605de&margin=%5Bobject%20Object%5D&name=image.png&originHeight=194&originWidth=186&originalType=binary&ratio=1&size=2871&status=done&style=none&taskId=u6b320a88-1d66-4c39-90e5-5826c0ad9fc)
  3. <a name="c7Pux"></a>
  4. ## 2、选择框
  5. ```python
  6. import pyautogui
  7. a = pyautogui.confirm('选择一项', buttons=['A', 'B', 'C'])
  8. print(a)
  • 输出如下图:点击B选项,返回值为B

image.png

3、密码输入

  1. import pyautogui
  2. a = pyautogui.password('Enter password (text will be hidden)')
  3. print(a)
  • 输出如下图:输入密码,显示为密文,点击OK,返回值为刚刚输入的值;

image.png

4、普通输入

  1. import pyautogui
  2. a = pyautogui.prompt('请输入一个数字:')
  3. print(a)
  • 输出如下图:显示为明文,点击OK,返回值为刚刚输入的值;

image.png

六、实例

1、鼠标控制:鼠标画一个正方形

  1. import pyautogui
  2. for i in range(2): # 画正方形
  3. pyautogui.moveTo(200, 200, duration=1)
  4. pyautogui.moveTo(200, 400, duration=1)
  5. pyautogui.moveTo(400, 400, duration=0.5)
  6. pyautogui.moveTo(400, 200, duration=2)

2、获取鼠标的实时位置

  1. import pyautogui
  2. import time
  3. try:
  4. while True:
  5. x, y = pyautogui.position()
  6. posi = 'x:' + str(x).rjust(4) + ' y:' + str(y).rjust(4)
  7. print('\r', posi, end='')
  8. time.sleep(0.5)
  9. except KeyboardInterrupt:
  10. print('已退出!')
  • 显示效果:

image.png

3、获取鼠标位置与所在位置的颜色

  1. import pyautogui
  2. import time
  3. try:
  4. while True:
  5. x, y = pyautogui.position()
  6. rgb = pyautogui.screenshot().getpixel((x, y))
  7. posi = 'x:' + str(x).rjust(4) + ' y:' + str(y).rjust(4) + ' RGB:' + str(rgb)
  8. print('\r', posi, end='')
  9. time.sleep(0.5)
  10. except KeyboardInterrupt:
  11. print('已退出!')
  • 显示效果:

image.png

4、自动点赞程序

  • 我们需要将所有的说说点赞,本页上的点赞完成后,就滚动鼠标,把新加载的说说也全部点赞;
  • 代码如下: ```python import pyautogui import time

def zan(): time.sleep(0.5) # 等待 0.5 秒 left, top, width, height = pyautogui.locateOnScreen(‘qzonezan.png’) # 寻找 点赞图片; center = pyautogui.center((left, top, width, height)) # 寻找 图片的中心 pyautogui.click(center) # 点击 print(‘点赞成功!’)

while True: if pyautogui.locateOnScreen(‘qzonezan.png’): zan() # 调用点赞函数 else: pyautogui.scroll(-700) # 本页没有图片后,滚动鼠标; print(‘没有找到目标,屏幕下滚~’) ``` image.png

  • 你这是什么东西