java爬取斗鱼：与虎牙对比

看了下斗鱼的基础页面，感受和虎牙的有点像，可是实际上确有点不一样。 首先想要获取页数，看了斗鱼的html页面，发现却不显示页面。 这是由于斗鱼把界面藏在了js页面中，谷歌浏览器的右击检查 那么接下来就是选取一款能够解析js的工具而且提取里面的信息了。jsoup不支持js的提取，咱们用htmlunit实现。抓取页面数。 / 详细看代码 / 假设咱们已经获取了页面总数，下一步须要执行的是模拟访问，请求

>>阅读原文<<