记一次我百万数据级python爬虫的未成功案例

今天，突发奇想，要不把csdn的所有用户信息给爬下来咋样呢。 想想自己能完成这样一个高端有趣的爬虫就兴奋诶，爬完我就可以自称，百万数据高级爬虫工程狮了！ 挥一挥衣袖，说干就干！ Test One 如果要爬取所有用户，那应该从哪下手呢？ 这个超简单嘛，我先看看csdn到底有多少用户 从这里就可以看出，用户应该是134万人左右吧 知道用户数了，要爬取还不简单么？ 很明显，从每个人的粉丝开始出发！只要将

>>阅读原文<<