大量的蜘蛛爬行抓取造成网站访问速度慢（包括恶意的蜘蛛）

标题：大量的蜘蛛爬行抓取造成网站访问速度慢（包括恶意的蜘蛛） 问题现象：网站开启后CPU2-5秒即达到100%使用率，短期内网站可以正常访问，1-2天后网站无法打开，或者打开加载特慢。 原因：大量的蜘蛛爬行抓取造成网站访问速度慢 处理方法： 1、登陆宝塔下载LOG日志 2、使用notepad++打开日志信息分析查看 3、Notepad++打开了以后发现大量的同IP段的访问。为了更直观的处理问题，将

>>阅读原文<<