爬取拉钩网所有python职位信息

爬取所有关键字时python的职位信息并保存为csv格式 项目在github下载地址： lagou-crawl-download 说明： 1.关键字可以是任意的在相应函数中修改就可以 2.由于反爬虫需要添加middleware中间件，来添加随机请求头和代理 3.由于使用selenium不添加代理只能爬取十几页的信息，想要爬取所有的应该是三十页左右 4.你也可以通过参数来自定义起始页和第几个位置开始

>>阅读原文<<