使用代理池爬取微信文章(pyquery+requests)

在看本文之前需要了解有关代理吃维护的知识。 若不清楚如何维护代理池,可参考:https://github.com/Germey/ProxyPool 但是在用的过程中发现该方法代理池里面的代理质量不是很好,经常会出现代理无效的情况,若大家有更好的方法,欢迎评论留言告知,感谢! ############配置文件config.py #mongodb的参数 MONGO_URL = 'localhost'
相关文章
相关标签/搜索