Scrapy框架的使用之Scrapy对接Splash

以前咱们实现了Scrapy对接Selenium抓取淘宝商品的过程，这是一种抓取JavaScript动态渲染页面的方式。除了Selenium，Splash也能够实现一样的功能。本节咱们来了解Scrapy对接Splash来进行页面抓取的方式。 html 1、准备工做 请确保Splash已经正确安装并正常运行，同时安装好Scrapy-Splash库。 git 2、新建项目 首先新建一个项目，名为scra

>>阅读原文<<