爬虫开发知识入门基础（3）

爬虫的反爬 反爬这部分是个重点，爬虫现在已经越来越难了，非常多的网站已经添加了各种反爬措施，在这里可以分为非浏览器检测、封 IP、验证码、封账号、字体反爬等。 下面主要从封 IP、验证码、封账号三个方面来阐述反爬的处理手段。 反爬 / 封 IP 对于封 IP 的情况，可以分为几种情况来处理： • 首先寻找手机站点、App 站点，如果存在此类站点，反爬会相对较弱。 • 使用代理，如抓取免费代理、购买

>>阅读原文<<