爬虫之Scrapy框架知识总结

本应该一个月前完成的总结，硬是拖到了如今，不能不说个人办事效率有多低下了。。。php 前段时间学习了python爬虫的相关知识，爬虫的意思就是用机器代替人去访问连接，而后将页面中的东西爬下来，保存在本地，意思基本就是这样。 如今的爬虫基本上分为这两大类： 累积式抓取（cumulative crawling）和增量式抓取（incremental crawling） 累积式抓取是指从某一个时间点开始，

>>阅读原文<<