利用selenium和火狐爬取网易云评论爬取

网易云音乐评论是异步加载且每次请求的参数都是加密处理过,身为一个小白,借鉴网上的解密方法后还是觉得太复杂了,于是就想尝试用selenium来暴力爬取。 本文最后以沙漠骆驼为实例爬取 当然,相比解密的爬虫,这个方法更慢,但相对的,不容易被封。 在写方法开始前,把之前的尝试简要说一遍。一开始,我用网页cookies值,headers调用后获取了网易云的评论页面,是个json格式,然后解析后发现参数是一
相关文章
相关标签/搜索