scrapy 框架的安装及常见的错误
1.安装pywin32
https://www.lfd.uci.edu/~gohlke/pythonlibs/#pywin32
进入到whl文件所在目录
pip install pywin32-221-cp35-cp35m-win_amd64.whl
或者
在pycharm里 file->settings->project里进行安装(推荐使用)
2.安装scrapy
pip install scrapy
(1).如果报错error:Microsoft visual C++ 14.0 is required...
解决:去https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
下载对应版本和系统位数的twisted,然后再安装scrapy
-->如果依然报错,去更新或下载更高版本的Microsoft visual C++
(2).下载Microsoft visualC++报错 .net Framework版本过低
下载.net Framework4.5.1到本地
3.测试
scrapy shell www.baidu.com
4.如果报错 importError:DLL load failed:找不到指定的模块
解决:需要注册pywin32
进入C:\Program Files\Python35\Scripts目录
找到 pywin32._postinstall.py
cd进入scripts目录执行注册命令:
python pywin32_postinstall.py -install
然后再进行测试
scrapy shell www.baidu.com
测试成功页面如下:
以上就是笔者的在学习scrapy框架时的安装过程,如有其它方面的error,欢迎提问、共同探讨学习!!!