python 针对selenium+phontomjs等模拟浏览器爬虫的反爬技术点

使用selenium+phontomjs爬取航空公司网站为例子cookie 1访问元素丰富度网站 普通用户在打开网页时会有比较丰富的地址访问，而自动爬虫一般只有少数固定的页面访问，好比航司活动专版、舱位价格页面、航线动态等。spa 图为岂安科技风控产品监控界面图片 2访问轨迹连贯性ip 用户在进行页面访问时，一般是有一个合理的访问轨迹，如从首页跳转到机票搜索，但爬虫在自动获取数据时，每每是对页面地

>>阅读原文<<