Python每日一记63>>>requests爬虫初步试用

刚才迫不及待进行了爬虫的实验,使用的是requests库,浏览器用的是QQ浏览器(当然可以用其他浏览器),网站是小猪短租北京地区(http://bj.xiaozhu.com/)
需要的基本知识是,查看网页代码,如下:
Python每日一记63>>>requests爬虫初步试用
Python每日一记63>>>requests爬虫初步试用
接下来直接上爬虫网页的代码啦
Python每日一记63>>>requests爬虫初步试用
Python每日一记63>>>requests爬虫初步试用
我们得到了初步的结果,后期再继续学习结果的处理
<Response [200]>表示结果正常,如果是404或其他的数字则代表错误
有些时候需要加入请求头来伪装成浏览器,以便更好的抓取数据

我们需要在网页界面按F12 打开开发者工具,然后找到User-Agent,复制包含的内容,具体如下:
Python每日一记63>>>requests爬虫初步试用
代码:
Python每日一记63>>>requests爬虫初步试用
一定要注意引号的位置
我最初是直接复制然后放在一个引号里,就报错了!!!
Python每日一记63>>>requests爬虫初步试用
Python每日一记63>>>requests爬虫初步试用
今天只是入门,之后再进行深入学习哦,蛮有意思的哈