Requests库入门——网页级小型爬虫

一、Requests库安装

Win平台: “以管理员身份运行”cmd,执行pip install requests

二、Requests库两个重要对象

Requests库入门——网页级小型爬虫
其中,Response对象包含爬虫返回的内容

三、Requests库主要方法

Requests库入门——网页级小型爬虫

四、Response对象的属性

Requests库入门——网页级小型爬虫
其中:
Requests库入门——网页级小型爬虫

五、异常处理

  1. Requests库异常
    Requests库入门——网页级小型爬虫
  2. Response异常
    Requests库入门——网页级小型爬虫

六、爬取网页的通用代码框架

Requests库入门——网页级小型爬虫

七、request方法详解

Requests库入门——网页级小型爬虫
13个访问控制参数,如下:
Requests库入门——网页级小型爬虫
Requests库入门——网页级小型爬虫