selenium爬取Ajax加载的网页（以微博为例）

咱们在浏览一些网页的时候，鼠标滚到底，就又会加载出一些新的内容，可是请求的网址是没有变的，这就是Ajax加载的效果。通常去爬取这种网站的时候，每每只能获得一开始加载出来的那些内容，而要利用鼠标滚到底才能继续加载出来的内容是得不到的，因此今天利用selenium来模拟用户登陆微博，并模拟鼠标下拉抓取某博主的相册。html 准备工做：安装并配置好Python的环境，安装了selenium和浏览器驱动，

>>阅读原文<<