scrapy学习总结（学自崔庆才大佬的书以及网上大佬们的博客）

1、scrapy工作路径      简单说明：首先，engine从start_url或者自定义的start_requests（）中获得初始的url，url通过请求得到response，如果没有设置callback回调给函数，则默认回调给parse()，如果设置则回调给相应的函数。此时response中包括已经成型的数据以及一些链接。已经成型的数据可以直接传给Item并yield或return给Pi

>>阅读原文<<