3.1.3 Jsoup设置头信息

在网络爬虫中,常常须要设置一些头信息。设置头信息的做用是假装网络爬虫,使得网络爬虫请求网页更像浏览器访问网页(固然也能够经过java的selenium框架来实现),进而下降网络爬虫被网站封锁的风险。Jsoup中提供了两种设置头信息的方法。 第一种方法:每次只设置一个请求头,若是要设置多个请求头,须要屡次调用此方法;第二种方法:添加多个请求头至Map集合。在程序3-3中,设置了一个请求头。在程序3-
相关文章
相关标签/搜索