如何自己封装一个爬虫框架

自己封装一个爬虫框架 1. 简介 2. 使用 3. 不足 4. 总结 1.简介 先看一下项目整体的目录结构： 1.1 run.py: 启动文件，文件的具体参数请仔细看注释内容 1.2 spider.py：具体的爬虫文件，里面主要有三个方法 List item 1） save_data(data, mode=‘db’)：保存目标数据，data是2）中返回的data, mode=’db’ 是保存的模式

>>阅读原文<<