web-robots

一、题目链接： https://adworld.xctf.org.cn/challenges/list 二、解法步骤： 题目提示robots协议 上网查询可得知： robots.txt是搜索引擎中访问网站的时候要查看的第一个文件。当一个搜索蜘蛛访问一个站点时， 它会首先检查该站点根目录下是否存在ro ......