【网络爬虫实战】抓取腾讯视频评论

首先 腾讯视频（青云志）中的评论是有多页的，涉及到翻页。猜想评论不是都在网页源码中的，查看网页源码确实不在。 第二， 这里经过fiddler得到firefox中新的js网页的url，而后打开此网页。这里还不能发现什么规律。 第三， 再次点击更多，经过fiddler获取js网页的url，此时比较这两个url，貌似发现了规律， 只有commentid是不一样的（url后面的部分无关紧要）python

>>阅读原文<<