scrapy框架+selenium驱动谷歌浏览器爬取简书网站存入mysql的网站级爬虫

前言：由于以前是学了爬虫的，以前常用request，bs4,re等来爬去网页等数据，也做过一些大型网站，后来很多人都说request适合网页级爬虫，爬网站级还是异步的scrapy框架好，二者都是优秀的爬虫工具，request适合新手，入门很轻松，爬取的逻辑和过程也好理解，scray入门稍难是一个系统的5+2结构，很有可能会懵逼，要花一段时间理解运用，才能逐渐理解这个框架，毕竟官方的文档写的说明就那

>>阅读原文<<