ReentrantLock控制线程池

webmagic每次在爬取一个网页时都会将他丢到线程池中的线程去处理,线程池有相应的大小阀值,其中用到了ReentrantLock 重入锁机制控,在超出阀值后等待,防止过多的任务进入 将目标url(request)放入线程池中执行 final Request requestFinal = request; threadPool.execute(new Runnab
相关文章
相关标签/搜索