python3 request 爬虫 httplib.IncompleteRead() 问题的简单解决方法

原由 在一个循环爬取得爬虫中，随机出现一个 httplib.IncompleteRead() 错误。python 分析 查询了许多资料以后了解到，这个是因为 chunked 编码不完整致使，那么如何解决这个问题？因为这时候其实数据咱们已经拿到了，可是 http_client 认为没有结束，因此有这么一个错误。具体分析过程能够看看这篇博文很详细。博文传送门web 处理 这里因为项目中充斥着 Requ

>>阅读原文<<