Python 37 的 Scrapy框架, Twisted 安装方法(通用)来自lot的分享
Python 37 的 Scrapy框架, Twisted 安装方法 64位 其他也通用
正文:
python 爬虫 框架的scrapy安装,网上也搜了许多方法,还是不能安装。折腾大半天终于安装成功了,方法分享给大家。(随着版本更新迭代,安装方法可能会有所出入,导致困扰的局面,所以不用纠结,)
自己刚安装好,亲测有效。
话不多说,方法。
步骤0:
安装scrapy的前置或者必备插件 = lxml , pywin32 , wheel ,Twisted (最后安装scrapy)
步骤1:
使用 pip 安装 前两个模块,win加R打开cmd,输入实现代码如下:
pip list 获取已经安装的模块的列表,已经安装的就不用重复安装1,
pip install lxml 安装lxml模块
pip install pywin32 安装pywin32模块 2,
pip install wheel 安装wheel模块
方法通用:
name = 包名
步骤2:
Twisted
直接用 pip 安装是不行的,会报出编译错误
Twisted 下载链接:https://www.lfd.uci.edu/~gohlke/pythonlibs/
确定 python 服务端 ,版本和位数
下载命令:pip instanll + 下载文件路径 + (复制文件名字)
下载命令:pip instanll + 下载文件路径 + (复制文件名字)
最后一步:安装scrapy 并测试,同样的用 pip install scrapy
安装成功后import 一下,没报错就成功了。 除了 Twisted 稍微麻烦点,其他的很快(网速)
导入一下:
没报错。