各大搜索引擎蜘蛛名称大全

1、百度蜘蛛：Baiduspider 网上的资料百度蜘蛛名称有BaiduSpider、baiduspider等，都洗洗睡吧，那是旧黄历了。百度蜘蛛最新名称为Baiduspider。日志中还发现了Baiduspider-image这个百度旗下蜘蛛，查了下资料（其实直接看名字就可以了……），是抓取图片的蜘蛛。 常见百度旗下同类型蜘蛛还有下面这些：Baiduspider-mobile（抓取wap）、Ba

>>阅读原文<<