【Scrapy】全栈爬取笔趣阁小说

前两天介绍完了scrapy基础操作之后，今天我们来实践操一下 全栈爬取笔趣阁小说，我们要先分析其主要URL地址，可分为以下三大类： 所有小说url地址总表 小说章节总表 小说章节内 根据分析,就需要写三个函数来对页面内容进行提取和处理 spider代码 # -*- coding: utf-8 -*- import scrapy from biquge.items import BiqugeItem

>>阅读原文<<