XCTF系列 // Web ez题 Writeup

1` robots robots 协议也叫 robots.txt 是一种存放于网站根目录下的ASCII编码的文本文件,它用来告知搜索引擎(或网络爬虫)哪些内容能被抓取,哪些内容不能被抓取。由于一些系统中的URL是大小写敏感的,因此 robots.txt 的文件名应统一为小写。   进入本题场景,网页中什么内容也没有,不过没有关系,既然题目为 robots ,故能够先访问 robots.txt 看看
相关文章
相关标签/搜索