基于WebMagic写的一个csdn博客小爬虫

最近有点无聊，想研究一下爬虫，说到爬虫，不少人第一时间想到的是python。可是此次我选择了室友@antgan推荐的java爬虫框架WebMagic。该框架容易上手，可定制可扩展，很是适合想用java作爬虫的小伙伴们。先看一下官方教程，里面写得很详细，也有很多参考案例。html 暂时还想不到有什么数据值得爬取，先拿csdn博客来练练手。 小爬虫能抓取指定用户的全部文章的关键信息，包括文章id，标题

>>阅读原文<<