爬虫登录需要隐藏字段

若爬取的网页需要登录，并且form data中包含隐藏的csrfmiddlewaretoken信息，如下图： 则可以在登录前的get请求当中的html源码中按住“ctrl+F”，搜索“csrfmiddlewaretoken”即可复制其value值：

>>阅读原文<<