安装Python scrapy会遇到的问题

一、需要安装twisted,可通过wget https://pypi.python.org/packages/source/T/Twisted/Twisted-15.2.1.tar.bz2 
获取,然后tar -xjvf Twisted-15.2.1.tar.bz2 进行解压 
注意在解压是可能会遇到tar (child): lbzip2: Cannot exec: No such file or directory 
tar (child): Error is not recoverable: exiting now 
tar: Child returned status 2 
tar: Error is not recoverable: exiting now的错误,这是因为你没有安装bzip2,通过 
yum -y install bzip2 命令安装一下就好了 
二、解压之后,cd Twisted-15.2.1到目录下,通过python setup.py install 指令进行安装 

三、.最后直接进行pip install scrapy进行scrapy安装就行了

 

当我运行项目的时候,报了下面的错误

安装Python scrapy会遇到的问题

然后我尝试下面的方式,又重新安装了一次

解决方法:(pip/pip3)

1.pip uninstall twisted 

2.https://twistedmatrix.com/Releases/Twisted/17.9/Twisted-17.9.0.tar.bz2

3.找到Twisted-17.9.0.tar.bz2

4. cd Twisted-17.9.05.python setup.py install

可能电脑有报了另外一种错误

安装Python scrapy会遇到的问题

解决方案:

http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted 在这个地址下载相应的whl版本信息其中cp后面就是依赖的Python版本。 amd64表示64位操作系统。下载后将文件放到D盘下,使用pip install d:\Twisted-18.9.0-cp37-cp37m-win_amd64.whl安装。
然后运行pip install scrapy执行安装操作

cp后面跟的数字是python的版本,比如现在我的python版本是3.5,那么需要下载cp35;
如果还提示不支持platform,就把win32和win64的版本都下下来分别试一下,我的系统是64位但是装32位的whl才能成功