爬取并分析一下B站的最热视频排行榜，看看你们都喜欢看什么视频

本文的文字及图片来源于网络,仅供学习、交流使用,不具备任何商业用途,若有问题请及时联系咱们以做处理。

如下文章源于菜鸟学Python ，做者：菜鸟哥

刚接触Python的新手、小白，能够复制下面的连接去免费观看Python的基础入门教学视频

https://v.douyu.com/author/y6AZ4jn9jwKW

 

 

前言

如今你们的生活中，已经愈来愈离不开B站了，2020年的第一季度，B站月活跃用户达到了1.72亿，日活跃用户也已经突破了5000万个用户。源源不断的流量让B站的up主们也是粉丝数目不断暴涨，百万粉丝的up主比比皆是。

今天，小编就带领你们来爬取并分析一下B站的最热视频排行榜，看看你们究竟都喜欢看什么样子的视频～～

01.榜单信息抓取

对于榜单的爬取，咱们爬取了榜单的前一百名视频的播放量，弹幕数量，以及视频的点赞、投币、收藏和up主的粉丝数目等信息。

 

对于排行榜的播放量、弹幕数量和视频连接的爬虫程序，以下图所示：

 

因为网页是静态网页，因此咱们能够直接采用requests请求的方式，来获取网页源代码，而后使用beautifulsoup来进行网页的解析，并抓取咱们须要的信息。对于每一个网页的点赞、投币、收藏和up主的粉丝数量。

能够采用咱们以前介绍的web scraper来进行抓取(牛逼的chrome插件，不用一行代码，轻松爬取各大网站公开信息！(附视频))。最后将两部分的内容进行合并，获得最终的抓取信息。

 

对于数据中存在的字符串类型的数值，例如观看数量为“122万”，已经通过数据清洗转化为int类型的数值。

02.数据分析

接下来，咱们来看一下，最热视频排行榜前十位中，up主们的粉丝数量的分布状况，程序以下图所示：

 

首先，咱们对数据按照粉丝数量的数值进行降序排序，而后将前十名的粉丝数量进行按“万”为单位进行计数，最后利用pyecharts中的Bar类来及进行可视化的展现。结果以下。

 

能够看到，粉丝数量排名最高的up主是“罗翔说刑法”，粉丝数量超过了1000万，妥妥的B站超级up主，也说明了在B站上小伙伴们不只是为了娱乐，还能够在B站上进行学习。你们看看前十的排行中，有没有你们关注的up主呢？

03.可视化展现

接下来，咱们对于排行榜中弹幕的数目进行一个分布的可视化展现:

 

程序中 ，咱们首先将弹幕的数量进行一个分段的划分，分别为0-5000，5000-10000一直到25000-30000，而后建立一个Pie类对象，进行数据的可视化展现。

 

能够看到，视频的弹幕数量中，有62%的是在0-5000的范围内，视频的个数随着弹幕数量的增长而呈现快速减小的趋势，弹幕数量在25000到30000之间的视频只有一个。这也符合你们正常的观看趋势。

那对于视频的点赞数目的视频分布又是怎样的呢？

 

上图中横坐标对应的是不一样的点赞数量分布区间，利用0到2万指的是，点赞数在0到2万次，而纵坐标对应的就是视频的数量；

从点赞数和视频的分布数量来看，呈现了不规则的趋势，点赞在2万到4万和12万赞以上的视频数目是最多的；

而点赞在0到2万的视频数目是最少的，看来你们对于视频是不会吝啬本身的“赞”；

另外一方面，相比于发弹幕，点赞的操做更加的便捷，也也许就是你们更愿意点赞的缘由吧。

04.词云分析

最后，小编抓取了榜单排行第一位的视频《众所周知，猫是一种尊老爱幼的动物》的弹幕，并进行了去重，来看一下弹幕中你们说起的关键词都有哪些吧。