XCTF系列 // Web ez題 Writeup

1` robots robots 協議也叫 robots.txt 是一種存放於網站根目錄下的ASCII編碼的文本文件,它用來告知搜索引擎(或網絡爬蟲)哪些內容能被抓取,哪些內容不能被抓取。由於一些系統中的URL是大小寫敏感的,因此 robots.txt 的文件名應統一爲小寫。   進入本題場景,網頁中什麼內容也沒有,不過沒有關係,既然題目爲 robots ,故能夠先訪問 robots.txt 看看
相關文章
相關標籤/搜索