用c语言写一个网络爬虫

(同步我的博客 http://sxysxy.org/blogs/28 到csdnhtml 写一个网络爬虫 写一个网络爬虫，来获取一个网站上感兴趣的信息。linux 最基本的模型 就是图。每一个页面看做一个节点，若页面A有到达页面B的连接，则添加一条由A到B的单向边。爬虫要遍历这张图。 遍历这张图 广度优先搜索便可。 不推荐用深度优先搜索(容易陷入单个分支而难以搜索到更普遍全面的信息) (若是不明白

>>阅读原文<<