給本wordpress網站robots中添加百度sitemap地圖
robots是搜索蜘蛛訪問你站點時首先檢測并訪問的文件,我們可以通過這個文件來告訴搜索引擎那些內容可以被抓取收錄,那些是不可以被收錄。當然并不是所有網站的robots設置是一摸一樣的,它根據不同的網站程序的不同設置的內容也會有所不同,但是如果采用的是同一網站建設程序那基本都是一致的。在這里主要介紹下WordPress robots協議如何設置。
?
robots協議的創建也很簡單,你只需在本地新建一個記事本“.txt”文件,然后重命名為“robots.txt”,把robots協議保存到里面,** 后把“robots.txt”上傳到站點根目錄即可。在此文章中介紹三個等級的WordPress robots協議,分別是簡單、適中、嚴格。請根據自己需要進行選擇即可。
User-agent: * Disallow:
/wp- Disallow: /?s=Sitemap:?
解釋:“User-agent: *”指的是允許所以的搜索引擎訪問;“Disallow: /wp-”是搜索引擎收錄“wp-”開頭的目錄。“指的是你的網站地圖。
User-agent: * Disallow: /wp-admin
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-includes
Disallow: /?s=Sitemap:?
這種寫法同樣允許所以搜索引擎訪問抓取,而且只限制搜索引擎抓取“/wp-admin”、“/wp-content/plugins”、“/wp-content/themes”、“/wp-includes”目錄,并非第一種方法直接限制“wp-”開頭的目錄。
User-agent: * Disallow: /wp-*
Disallow: pagetrackback/
Disallow: /categorypagetrackback/”限制抓取Trackback內容;“Disallow: /category/*”限制抓取所有分類清單。
- 如何優化:
- 網站url改版不收錄 網站建設哪個 奉賢網站改版哪家好 公司網站改版價格會變嗎 網站改版注意哪些 陽江網站開發 孝義網站定制公司 日本跨境選品軟件網站開發 本溪網站定制報價 鄭州旅游網站開發運營