看larbin源码看看的,感受脑子里思路乱急了,整理整理。ide
larbin工做的主要步骤就是:函数
首先,初始化各类变量,等等。url
而后进行dns解析dns
解析完后,进行抓取。源码
中间涉及到sequencer()这个函数,进行url调度,而在调度的时候又有不少问题。包括hash等问题。hash
如今就先弄清关于调度中的问题。 恩 !it