python3 [爬虫入门实战]爬虫之scrapy爬取织梦者网站并存mongoDB

主要爬取了编程栏目里的其余编程里的36638条数据 过程是本身一步一步的往下写的，有不懂的也是一边找笔记，一边百度，一边调试。html 遗憾：没有进行多栏目数据的爬取，只爬了一个栏目的数据，但愿有想法的有钻研精神的能够本身去尝试爬取一下，难度应该不会很大。node 给一张效果图： python 爬取字段：标题，标题连接，标题描述，发布时间，发布类型，发布tagweb 爬取方式：主要是获取div【p

>>阅读原文<<