打造IP代理池，Python爬取Boss直聘，帮你获取全国各类职业薪酬榜

爬虫面临的问题 不再是单纯的数据一把抓 多数的网站还是请求来了，一把将所有数据塞进去返回，但现在更多的网站使用数据的异步加载，爬虫不再像之前那么方便 很多人说js异步加载与数据解析，爬虫可以做到啊，恩是的，无非增加些工作量，那是你没遇到牛逼的前端，多数的解决办法只能靠渲染浏览器抓取，效率低下，接着往下走 千姿百态的登陆验证 从12306的说说下面哪个糖是奶糖，到现在各大网站的滑动拼图、汉子点击解锁

>>阅读原文<<