码农写了个爬虫，看到抓回来的文字笑了，网友：不封ip已很友好！

想必有部分程序员也写过一些爬虫程序吧，不论是java语言还是php语言还是python等，都可以轻松实现，用php一行代码就可以抓取一个网页，不过后续要处理的细节还是蛮多，各种去噪处理什么的，另外还要注意的一点就是要遵循一定的规则，有的网站是不希望被抓取的，在网站的根目录下会有一个robot.txt之类的文件，爬虫要遵守这个规则，如果不遵守这个规则就算是比较流氓的做法了，近期一个程序员就给我们分享

>>阅读原文<<