一、说明

1、使用requests获取视频列表
2、使用selenium、pyautogui控制chrome打开，关闭，按钮等操作
3、使用IDM手动下载视频

二、代码

  1. # -*- coding:utf-8 -*-
  2. import requests
  3. from selenium import webdriver
  4. import pyautogui
  5. import time
  7. videos_url = []
  8. # xiazai_shipin_coords = 0, 0
  9. kaishi_xiazhai_coords = 0, 0
  12. def get_video_urls(url):
  13.     headers = {
  14.         'user-agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.163 Safari/537.36'
  15.     }
  16.     session = requests.Session()
  17.     req_json = session.get(url=url, headers=headers).json()
  18.     create_time = jsonpath(req_json, '$..create_time')
  19.     player = jsonpath(req_json, '$..player')
  20.     title = jsonpath(req_json, '$..title')
  21.     videos_url.extend(player)
  24. def get_image_coords(image):
  25.     while True:
  26.         coords = pyautogui.locateCenterOnScreen(image)
  27.         if coords is not None:
  28.             print("坐标是： ", coords)
  29.         return coords
  32. def open_Chrome(min_code, max_conde):
  33.     # global xiazai_shipin_coords
  34.     chrome_Options = webdriver.ChromeOptions()
  35.     extension_path = r'C:\Program Files (x86)\Google\Chrome\Application\idm-integration-module.crx'
  36.     chrome_Options.add_extension(extension_path)
  37.     driver_path = r"C:\Program Files (x86)\Chrome\CentBrowser\Application\chromedriver.exe"
  38.     # 启动浏览器，并设置好wait
  39.     browser = webdriver.Chrome(executable_path=driver_path, options=chrome_Options)
  40.     # 如果不开启一个页面，打开标签会报错
  41.     browser.get("https://www.baidu.com")
  42.     # 窗口最大化
  43.     # browser.maximize_window()
  44.     # 改变窗口大小
  45.     # browser.set_window_size(1080, 768)
  46.     # videos_url 有400多条数据，一次打开太多标签会卡顿
  47.     for v_url in videos_url[min_code:max_conde]:
  48.         js = "window.open('{}')".format(v_url)
  49.         # 调用js 开启新标签
  50.         browser.execute_script(js)
  51.         # 每开启一个标签停2s
  52.         time.sleep(2)
  53.     # 等待直到检测到坐标
  54.     time.sleep(2)
  55.     # xiazai_shipin_coords = get_image_coords('xiazai_shipin.png')
  56.     # xiazai_shipin_coords = input("请输入x, y")
  57.     # 获取页面所有句柄
  58.     all_handles = browser.window_handles
  59.     for handle in all_handles[2:]:
  60.             # 查询当前页面url
  61.         # browser.current_url
  62.         # 使用句柄切换页面
  63.         browser.switch_to.window(handle)
  64.         # 切换标签页面后等待2s
  65.         time.sleep(0.1)
  66.         # 使用鼠标左键点击坐标中心点
  67.         xiazai_shipin_coords = get_image_coords('xiazai_shipin.png')
  68.         pyautogui.leftClick(xiazai_shipin_coords)
  69.         # 关闭当前标签
  70.         browser.close()
  71.     # 关闭浏览器
  72.     browser.quit()
  75. if __name__ == '__main__':
  76.     for i in range(1, 24):
  77.         req_url = "https://yuba.douyu.com/wbapi/web/group/videolist?type=2&group_id=869469&page={}".format(i)
  78.         get_video_urls(req_url)
  79.     print(len(videos_url))
  80.     mincode = 0
  81.     maxcode = 20
  82.     for b in range(0, len(videos_url) % 20):
  83.         open_Chrome(mincode, maxcode)

三、问题说明

1、会有获取不到下载按钮的情况
2、IDM点击下载后不能自动开始下载，还需要点击，此操作没有
3、斗鱼会有一些视频已不存在，以及一些漏掉的视频要有对比