Python爬取B站《工作细胞》短评—异步加载信息的爬取

很多网页的信息都是通过异步加载的，本文就举例讨论下此类网页的抓取。   《工作细胞》最近比较火，bilibili 上目前的短评已经有17000多条。 先看分析下页面   右边 li 标签中的就是短评信息，一共20条。一般我们加载大量数据的时候，都会做分页，但是这个页面没有，只有一个滚动条。 随着滚动条往下拉，信息自动加载了，如下图，变40条了。由此可见，短评是通过异步加载的。 我们不可能一次性将滚

>>阅读原文<<