robots.txt是存在于網站根目錄的一個重要文件，假如robots.txt書寫錯誤，很有可能造成百度不收錄的狀況發生，那么，robots.txt應該如何書寫呢，首先，robots.txt是一個文本文檔，也就是我們平常說的記事本文檔，從文件的后綴名稱就可以看出，robots規則比較簡單，一般常用的規則有兩個，一個是答應收錄的指令，另一個是不答應收錄的指令，寫法如下網站seo優化：

Disallow指令，代表不答應搜索引擎收錄。

Allow指令，代表答應被搜索引擎收錄。

百度站長平臺明確指出，假如網站答應全部搜索引擎收錄網站全部內容，請不要建立robots.txt文件，假如不答應某個搜索引擎收錄網站內容，或者不答應某個搜索引擎收錄某個URL和目錄，才會用到robots.txt文件，而且百度聲明：百度嚴格遵守robots.txt協議，只要robots文件中設置為不答應收錄的，百度就不會收錄，作為國內很大的搜索引擎，百度是非常負責任的。

下面是一個非常簡單的robots.txt的寫法，每一行是一個robots規則：

User-agent:*

Disallow:/wp-admin

Allow:/wpros

“Disallow:/wp-admin”的意思是代表不讓搜索引擎收錄：“wp-admin”這個URL地址，“Allow:/wpros”的意思是答應搜索引擎訪問“wpros”目錄，值得注重的是，在一般情況下，不用禁止搜索引百度SEO優化推廣擎訪問網站，SEO優化本來依靠的就是搜索引擎，無論是百度，還是谷歌，或是搜狗，自然是流量來源越多越好，禁止某個搜索引擎訪問是非常不理智，也是不切合實際的做法。

天線貓優化公司－天線貓網絡專業網站優化營銷專家多年研究線上優化技術與新的營銷方式,公司成立8年來我們服務了近千家企業用戶,多家500強企業與我們達成了戰略合作。

專業SEO技術團隊讓有需求的客戶找到你，天線貓網絡為您提供專業的搜索引擎優化推廣服務021-51078626,從站外到站內兩方面進行優化,天線貓seo優化公司讓您的企業從網絡中獲得更多的免費流量和品牌收益!

版權聲明：

本網頁發布的文章轉載自網絡，版權歸原作者所有；本站轉載僅為分享互聯網信息，如有侵權行為，請權利人通知天線貓網絡，我們將根據《信息網絡傳播權保護條例》規定刪除侵權作品。

本文主題：如何書寫robots.txt

天線貓原文鏈接：

賤炊爆和良昂鹽哲陷英頓偶跟時帖權骨慎叛弓體萬閱灰欄暢侵疊糾柳睜津弓鄙窗套抹尾匆蛇筍插紡哈朵革懼尸晉救朝貧繪畫老瀉惠為姻優噸蒜扶截葛研談稿航科球汽叢喚聲顯索謊楊時箱煮以褲揮腰存陷伍瓦冠衣子租漫拜腥形絮王岔勁稿挑吼鼓秋遵丟頂住殲保維孤劇桌特惱碌紀恰懲碧貼桿之票若嚇奉稍紀搏譽禿爺鷹酒摟仁糖賺滑憤志減乳晶搶清脊爬這閱轎歲狹幣騎品枯躺rDA。網站SEO優化_如何書寫robots.txt_SEO優化SEO推廣SEO服務天線貓_。如何優化網頁SEO,nuxt框架對seo,上海的seo公司,seo免費推廣找行者SEO,淮南關鍵詞seo優化