scrapy-爬取流程

什么时候到pipeline，什么 时候到spider这个就不说了，这个是框架跳转到的流程 关键是访问之前要登录怎么办，数据还要注入呢 所以这次我们来关注一下网页下载前的流程 start_urls 这是个列表，里面就是爬取的链接了 我们前面爬取就只是写了一个，但是其实可以写多个 链接又是怎么访问的呢 parse_start_url 这东西你就可以手动提取链接返回了 start_requests 这东

>>阅读原文<<