webmagic抓取须要登陆页面的内容,Site中addCookie

1 先本身登陆,而后在浏览器查看有关于这个网站的cookie,肯定是那几个cookie对登陆有做用,比较麻烦的是必定得一个一个的确认,手动删除试验这个cookie是否对登陆有做用,还好我这个只有三个。java

查看浏览器的cookie,取图中的三个值:浏览器

private  Site site = Site.me()
            .setRetryTimes(3)
            .setSleepTime(2000)
            .setTimeOut(60000)
            .setCharset("utf-8")
            .addCookie("域","名称", "内容")
            .addCookie("域","名称", "内容");

这样设置后就能够取到登陆才能看到的值。cookie

相关文章
相关标签/搜索