Robots.txt 文件應放在哪里？
作者：胡舒君
瀏覽：2195次
發布時間：2016-12-09
編輯
分享
評論
贊0
Robots.txt 文件必須放在網站的根目錄。放在子目錄的 Robots.txt 文件搜索引擎不能爬取到，所以不會起任何作用。
例子：
http://www.seowhy.com/robots.txt 有效
http://www.seowhy.com/bbs/robots.txt 無效
如果你不能控制根目錄的 robots.txt，則你可以通過在子目錄網頁中使用標簽阻止網頁被收錄。
猜你喜歡