python下利用Selenium获取动态页面数据

利用python爬取网站数据很是便捷，效率很是高，可是经常使用的通常都是使用BeautifSoup、requests搭配组合抓取静态页面，即网页上显示的数据均可以在html源码中找到，而不是网站经过js或者ajax异步加载的，这种类型的网站数据爬取起来较简单。可是有些网站上的数据是经过执行js代码来更新的，这时传统的方法就不是那么适用了。这种状况下有以下几种方法： - 清空网页上的network信

>>阅读原文<<