Robots.txt 文件應放在哪里?

專用名字

Robots.txt 檔必須放在網站的根目錄。放在子目錄的 Robots.txt 檔搜索引擎不能爬取到,所以不會起任何作用。
例子:
http://www.seowhy.com/robots.txt 有效
http://www.seowhy.com/bbs/robots.txt 無效
如果你不能控制根目錄的 robots.txt,則你可以通過在子目錄網頁中使用標籤阻止網頁被收錄。

相關文章:
robots.txt檔有什麼必要?
robots.txt

Post a comment

 

Loading...