代理IP之Proxy_Pool(比ProxyPool好用些)
1.下载安装proxy_pool-master
下载地址及参考文档:https://github.com/jhao104/proxy_pool
下载后解压,在proxy_pool-master中看到如下一堆即为成功.
2.打开requirements.txt
3.打开cmd.exe
依次执行以下5个命令:
pip install APScheduler==3.2.0
pip install werkzeug==0.11.15
pip install Flask==0.12
pip install requests==2.12.4
pip install lxml==3.7.2
通过命令 pip list可以查看已经安装过的包
4.启动
到Run目录下运行python main.py
会出现以下情况,只需耐心等待即可
启动过几分钟后就能看到抓取到的代理IP,你可以直接到数据库中查看,推荐一个SSDB可视化工具。
也可以通过api访问http://127.0.0.1:5010 查看。详情可参考文档:https://github.com/jhao104/proxy_pool
中的"使用".
5.可以通过redis数据库可视化工具查看