首頁標簽Robots

什麼是Robots.txt檔案？它有什麼作用？

txt 是網站裡的一個檔案，它告訴搜尋引擎抓取工具（蜘蛛）禁止或允許抓取網站的哪些內容...