反爬虫技术实践案例

  笔者第一份工作就是以java工程师的名义写爬虫，不得不说第一份工作很重要啊，现在除了爬虫不会干别的，到现在已经干了近5年了，期间经历了不少与反爬策略的斗争。最近又耗时两周成功搞定了某网站的反爬策略后，心里有点莫名的惆怅。今日无心工作，就总结下这些年与网站互怼的经验吧。 无反爬裸站 现在一个网站或多或少都会配置一定的反爬措施，毕竟现在一台笔记本的性能比某些小站的服务器都强，如果不加以限制，分分钟

>>阅读原文<<