爬虫尝试抓取动态网页

以前写过一篇使用爬虫抓取暗黑3玩家数据，因为凯恩之角数据老是不更新，那个爬虫意义不大数据库 其实官方网站也是能够看到玩家数据的，我当时没有去爬的缘由是...网页源代码和网页展现的数据不同，知道最近我才知道那是动态网页工具 百度了半天，感受有一种方式比较简单，就是F12使用开发者工具，去找到加载网页的时候发送的request url网站 好比说我要爬取玩家‘可乐加冰-5750’的数据，他的我的数据页

>>阅读原文<<