Scrapy爬虫局部Selector的选取办法

本人由于工作原因需要爬取齐家网的论坛信息，一个比较小众的论坛，需要爬楼主信息以及评论内容，然后遇到了一个比较烦人的问题 我需要取每一条评论，按正常的思路是把每一楼当作一个selector，然后从中遍历每一个sel，选取xpath， for sel in Selector： print sel.xpath(‘//xxxxxxx’).extract() 如果你这么写，就恭喜你，我这么写是错的 这是为什

>>阅读原文<<