Python爬虫实战--（三）获取网页中的动态数据

常见的动态数据是咱们下拉下滑栏时，网页上面能够动态加载出来的新的数据。譬以下面这个网站： https://knewone.com/discover 咱们不断地下拉下滑栏，会不断地有新数据加载出来。可是网页的URL却一直保持不变。但其实在咱们下拉的时候浏览器会发送一个新的异步请求来得到这些新的数据，只是新的异步请求的URL没有显示到浏览器上。因此获取网页中的动态数据的关键就在于获取异步发送URL并发

>>阅读原文<<