scrapy中对随机代理中间件的处理

import redis from scrapy.exceptions import NotConfigured class RandomProxyMiddleware(object): """ 利用scrapy自己的proxy middle机制，实现一个随机IP代理池，而且能够动态的删除有问题的IP """ def __init__(self, settin

>>阅读原文<<