爬虫——记一次破解前端加密详细过程

摘要:工做差很少快一年了,应工做须要爬过各类各样的航空公司网站,大到B2B平台,小到东南亚某某航空官网,从最初使用webdriver+selenium爬虫到如今利用http请求解析html,经历过各类各样的问题,webdriver+selenium这种办法虽然万能,并且能够用JS写解析脚本方便调试,可是用久了才发现这玩意不论是效率仍是稳定性都很是差,放到服务器上动不动就挂掉,两三天就须要重启一次。
相关文章
相关标签/搜索