Reuqests-html教程

一、概述 requests 作者开发，集成 pyppeteer。 最近爬虫遇到的情况是，爬取的网站使用JavaScript渲染的，网站爬取的结果只有一堆JS代码。之前遇到这种情况的处理办法是用Splash(一般是配合Scrapy)，或者Selenium来爬取，介绍一下常用的模拟浏览器执行，来爬去js渲染页面的方法。 方法 介绍 Selenium 驱动Chrome、Firefox等浏览器爬取 Spl

>>阅读原文<<