1.json数据提取方法

json

• 数据交换格式，看起来像python类型（列表、字典）的字符串
• 使用json之前需要导入
  • import json
• 哪里会返回json数据
  • 浏览器切换到手机版
  • 抓包app
• json.loads()方法
  • 把json字符串转化为python类型
  • json.loads(json字符串)
• json.dumps()方法
  • 把python类型转化为json字符串
  • json.dumps({})
  • json.dumps(ret1,ensure_ascii=False,indent=4)
    • ensure_ascii：让中文显示成中文
    • indent：能够让下一行在上一行的基础上空格
• 豆瓣电视爬虫案例

2.retrying模块的使用

第一步，安装retrying库

• pip install retrying

第二步，导入模块

from retrying import retry
@retry(stop_max_attempt_number=3)
def fun1():
    print('this is func1')
    raise ValueError('this is test error')
if __name__ == '__main__':
    fun1()

3.xpath模块的学习

4.lxml模块的学习

5.cookie相关的请求

6.session