BeautifulSoup爬取豆瓣电影排名

豆瓣电影排名网址：https://movie.douban.com/top250?start=0&filter= 在进去豆瓣电影排名后，打开浏览器的检查功能分析爬取页面源代码，在写请求代码以前，首先咱们得找出网页的请求头部。 请求头部中的’User-Agent’，是一个特殊的字符串头，能够使服务器识别客户使用的操做系统及版本，浏览器版本等信息。在作爬虫时加上该信息，能够假装为浏览器，不加则会被认出

>>阅读原文<<