問題：robots需要禁止后臺目錄嗎？

問題補充：在設置robots的時候不太確定是否要禁止后臺目錄，是否需要禁止呢？

回答：要知道這個問題，首先得搞清楚robots的意思和作用，robots的作用主要是告訴搜索引擎哪些頁面可以抓取收錄，哪些頁面不要抓取收錄。

對于網站后臺，顯然是不需要搜索引擎抓取和收錄的，所以可以在robots設置禁止對網站后臺的抓取。通常來說，只要能打開的頁面鏈接搜索引擎蜘蛛都會去抓取，而蜘蛛抓取對于單個網站來說是有配額的，如果抓取后臺的次數多了，就浪費了對其他有用頁面的抓取，從這個方面來說，后臺的頁面也是需要禁止抓取的。

關于robots是否需要禁止后臺目錄的問題，筆者就簡要的說這么多。總之來說，這個問題很簡單。因為網站后臺對于普通用戶來說沒有意義，為了解決蜘蛛抓取次數，所以應該禁止搜索引擎對網站后臺的抓取。