Python3.x：Selenium+PhantomJS爬取带Ajax、Js的网页及获取JS返回值

前言　 现在很多网站的都大量使用JavaScript，或者使用了Ajax技术。这样在网页加载完成后，url虽然不改变但是网页的DOM元素内容却可以动态的变化。如果处理这种网页是还用requests库或者python自带的urllib库那么得到的网页内容和网页在浏览器中显示的内容是不一致的。 解决方案 使用Selenium+PhantomJS。这两个组合在一起，可以运行非常强大的爬虫，可以处理coo

>>阅读原文<<