爬虫-timeout机制-避免网页假死 长时间不加载

爬虫有时候会由于爬去某些网页速度极慢，影响性能。全部能够设置超时时间。  timeout单位 秒  设置超时时间为12，使用try语句。python #coding:utf-8 **urllib2** 超时能够经过 urllib2.urlopen() 的 timeout 参数直接设置。 例如: #coding:utf-8 import urllib2 try: url = "http://

>>阅读原文<<