python scrapy获取快递数据
项目地址:https://gitee.com/zhangjianyu/scrapy_grabs_express_data/tree/master
1, 创建项目
scrapy startproject kuaididanhao
2. 创建爬虫
首先进入创建项目的跟目录
创建完成后查看下文件目录
如图就代表创建成功了
对爬虫进行代码编写 在spiders/kuaidi.py
然后到 settings.py 进行配置
分析下要爬的页面
然后到middlewares.py 进行配置