Node爬虫之使用 async 控制并发

上文 《Node爬虫之使用 eventproxy 控制并发》咱们说到用 node 爬了csdn首页数据，可是这些请求彻底是并发的，若是某些网站有 “反爬” 机制，就颇有可能封锁你的 IP。这样的状况下咱们就能够使用 async 模块。主要用到的是 async 的 mapLimit(arr, limit, iterator, callback)接口。node async.mapLimit(arr,

>>阅读原文<<