基于RPC的抖音直播爬虫

本案例是基于RPC的抖音web直播数据采集。html

文章内容仅供参考学习,若有侵权请联系做者进行删除\
可采集内容和页面呈现内容相同,包括用户评论、关注、谁来了、送礼物等数据。

RPC(Remote Procedure Call)是远程调用的意思。web

在Js逆向时,咱们本地能够和浏览器以服务端和客户端的形式经过websocket协议进行RPC通讯,这样能够直接调用浏览器中的一些函数方法,没必要去在乎函数具体的执行逻辑,能够省去大量的逆向调试时间。segmentfault

像抖音直播间的数据传输采用的是protobuf,若是彻底解析的话实在是浪费时间,不适合作案例教程。浏览器

还有重要的一点是,经过RPC的方法能够不用搞加密参数signature,开一个页面就能够了。websocket

接口分析

首先经过控制台进行抓包,普通的get请求。有加密参数signature,不过咱们不须要搞。socket

image.png

可是返回的是通过 protobuf 序列化数据。函数

image.png


更多内容请订阅专栏,查看原文。学习

专栏连接:https://blog.csdn.net/weixin_...加密

原文连接:https://blog.csdn.net/weixin_...url

相关文章
相关标签/搜索