爬虫实践---悦音台mv排行榜与简单反爬虫技术应用

由于要抓取的是悦音台mv的排行榜，这个排行榜是实时更新的，如果要求不停地抓取，这将有可能导致悦音台官方采用反爬虫的技术将ip给封掉。所以这里要应用一些反爬虫相关知识。 目标网址：http://vchart.yinyuetai.com/vchart/trends?area=ML 网站结构： 上面红线圈出来的地方都是需要注意的小细节： 首先 排行榜分为，内地、港台、欧美、韩国、日本五个地区 分别将其点

>>阅读原文<<