XCTF web新手 robots

1.题目描述：X老师上课讲了Robots协议，小宁同学却上课打了瞌睡，赶紧来教教小宁Robots协议是什么吧。 2.题目解析：根据题意我们猜测本道题与robots协议有关。 robots协议：robots协议也叫robots.txt，用来告诉漫游器哪些内容不应被搜索引擎漫游器获取，哪些内容不应被获取。 3.解题过程 点开系统给的做题连接 什么内容也没有，根据提示访问robots.txt 找到类似于

>>阅读原文<<