python scrapy-redis分布式爬虫 学习笔记

1、xpath的exract()方法

     xpath()方法返回的是SelectorList实例,是一个选择器列表,必须使用extract()方法才能提取最终的数据,

     extract_first() 用来提取第一个匹配到的元素,如果没有匹配的元素,则返回 None

     切片,从一个对象中得到list

  xpath(query)

     对列表中的每个元素调用 .xpath() 方法,返回结果为另一个单一化的 SelectorList 。

  query 和 Selector.xpath() 中的参数相同。

 

  extract()

     对列表中的各个元素调用 .extract() 方法,返回结果为单一化的unicode字符串列表。

python scrapy-redis分布式爬虫 学习笔记