scrapy

最近看了一点scrapy,看得比较少,也比较乱。因为主要就是运行现成的代码,所以想说一下怎么在终端运行写好的scrapy代码。
1):首先我们建立一个目录,进入自己想要建立的位置,在终端输入scrapy startproject 目录名字,即可建立一个新的目录
scrapyscrapy进入之后我们可以看见里面有一个spiders文件夹,所有的爬虫项目都可以写在这里面。当我们写完之后,进入到根目录中,按住shift键然后右键找到在此处打开命令窗口,输入scrapy runspider 爬虫名称即可运行。然后后边加入o -data.csv即可把爬取到的数据保存为csv类型