利用node.js写爬虫 爬取某相亲网站全部交友信息

利用node.js,写了一个爬虫js。1个小时左右的时间,便爬取了2000多条交友信息,包括网名,年龄,图片,学历,工资等。当然,爬取的速度和网速有很大的关系,也和你要爬取的网站响应的速度有关。先看一下,爬取的成果(涉及隐私,面部全部打上马赛克) 说一下思路和代码流程: 首先require引入http(如果爬取的网站是https安全模式的话,引入https),fs,  path 。代码如下: va
相关文章
相关标签/搜索