pyspider爬取https网址的时候报HTTP 599: SSL 错误解决办法
pyspider是个非常适合新手快速入门爬取网站数据的一个框架,是国内某个大神写的,然而往往我们在实际使用过程中也会遇到很多坑,下面是我在使用pyspider爬取https网站的时候报了一个错误:
错误信息:HTTP 599: SSL certificate problem: self signed certificate in certificate chain
字面上看说的是我的ssl证书有问题,我参考了网上的各种解决办法,最终得到了一个最简单的解决办法,那就是在请求url的时候携带一个参数:
validate_cert=False
加上这个参数,保存再次运行代码就不会报刚才的错误了,效果图如下: