使用scrapy运行爬虫是报错DNS lookup failed:no results for hostname lookup

         使用scrapy运行爬虫是报错DNS lookup failed:no results for hostname lookup   转载：https://blog.csdn.net/lxq_9532/article/details/81514518   *修改setting.py文件，将ROBOTSTXT_OBEY = True  改为False*** 补充：观察代码可以发现，默

>>阅读原文<<