Scrapy 爬取网易云音乐播放量百万以上的歌单以及歌单详情

创建爬虫 查看歌单链接 https://music.163.com/#/discover/playlist 用 requests 下载此链接的网页发现不是原网页，应该是被跳转到了登录页面。分析之后得到真实网页应该是： https://music.163.com/discover/playlist （去掉 #） 同时还需要设置一下 headers，如下： DEFAULT_REQUEST_HEADER

>>阅读原文<<