webmagic fiddler https代理

一、开启fiddler的https代理。把fiddler的根证书下载到本地（该步骤网上较多介绍）；

二、把证书导入java；

keytool -import -alias fiddlercert -file fiddlerRoot.cer -keystore %JAVA_HOME%/jre/lib/security/cacerts -storepass changeit

其中fiddlerRoot.cer为Fiddler的根证书；

此时就fiddler已可以代理java程序的https请求；

抓包与比较浏览器的包比较，了解到cookies信息不全；在addCookies时不用指定domain就能够了；