htmlunit抓取数据的一些总结

最近一直用htmlunit工具来抓数据,完成各种目标网站自动登陆抓取各种数据。过程当中碰到了各种问题,本身慢慢摸索,但最终仍是一一的解决。后面会贴一些代码上来,不至于让文章看看起空荡荡的。html 附上一些总结:angularjs 1.抓取数据主要两种方案:1、模拟浏览器操做 2、抓包,我的在采起两种方案时候会交换使用ajax 2.对于有验证码的,我的处理办法:抓取验证码到swing面板,手动输入
相关文章
相关标签/搜索