IPpool及爬取搜狗搜索下的微信页面

# 代理ip # 默认爬虫时使用的是真实IP,为了伪装真实IP,使用代理IP。 # redis数据库是内存型数据库,及支持将数据存储到内存,也可以将数据进行持久化的本地存储。 # redis非常适合做数据的缓存。 先拿  知乎  练手, 模仿用户正常登陆知乎 # 直接将登陆成功之后的Cookie放在headers中,向页面发送请求。 url = 'https://www.zhihu.com
相关文章
相关标签/搜索