爬取拉勾网

简单快速爬取拉勾网，我们需要在爬取json文件，需要发送POST请求，但是需要先发送一次GET请求，不然会返回错误信息， 爬取间隔尽量设置长一点，有多个ip随意。。。 # -*- coding: utf-8 -*-import scrapy import time import re import json from wde32.items import Wde32Item # 必须先发一次GET

>>阅读原文<<