seo優(yōu)化:百度搜索引擎蜘蛛爬取網(wǎng)頁面的特性

昨日和負(fù)責(zé)人聊百度搜索引擎搜索引擎蜘蛛爬取網(wǎng)頁頁面的特性，負(fù)責(zé)人一句話“百度爬蟲爬取網(wǎng)頁頁面層級(jí)淺，假如用robots.txt文件靜止不動(dòng)，則造成百度收錄終止”則要我內(nèi)心有一個(gè)迷惑，難道說真的是那樣的？我的網(wǎng)站是8.12創(chuàng)建了，創(chuàng)建后寫了2~3篇原創(chuàng)文章內(nèi)容另外轉(zhuǎn)截了一部分文章內(nèi)容，有2~3篇文章內(nèi)容仍在愛站網(wǎng)、站長論壇等網(wǎng)址文章投稿了，外鏈也干了點(diǎn)，但是百度搜索只百度收錄主頁，好歹不百度收錄別的網(wǎng)頁頁面，并且主頁快照更新都不升級(jí)。聯(lián)絡(luò)到這話，由于blog的robots.txt文件屏蔽掉css文件（Disallow:/*.css$），因此昨天晚上決策發(fā)一篇文章，改動(dòng)下robot.txt文件，等候百度搜索升級(jí)，今日觀查結(jié)果。

很先、根據(jù)百度站長工具-seo綜合查尋結(jié)果如下圖：

網(wǎng)站收錄量：總百度收錄量：4；今天百度收錄：0；近期一周：1；近期一月：4。

百度搜索反鏈：661個(gè)。

關(guān)鍵詞排名：信陽seo：24；信陽網(wǎng)站提升：18；信陽網(wǎng)站營銷推廣：77

第二、看百度搜索引擎百度收錄歷史記錄。

從2021-08-13到2021-08-31百度搜索對(duì)blog百度收錄量從0提升到1后保持不會(huì)改變。對(duì)比狀況下，google百度收錄量則從0提升82。別的百度搜索引擎大多數(shù)終止百度收錄。

再看百度搜索引擎反鏈的歷史記錄。

從2021-08-13到2021-08-31百度搜索反鏈從1提升到131，google反鏈從0提升到1（google反鏈提升比較慢），yahoo反鏈則從0提升到21，有道反鏈一直為0。

從百度搜索反映看來，robots.txt文件屏蔽掉css很有可能便是造成百度搜索對(duì)網(wǎng)址終止百度收錄的緣故了。夜里與盆友閑聊，盆友講過個(gè)見解：由于blog的css文件（）里有掩藏編碼（“Display:none;”）一旦屏蔽掉百度搜索引擎搜索引擎蜘蛛爬取便會(huì)被百度搜索引擎判定為舞弊。原本css文件掩藏編碼是出自于網(wǎng)頁布局或別的必須而不可認(rèn)為之的對(duì)策，一旦屏蔽掉搜索引擎蜘蛛爬取，當(dāng)搜索引擎蜘蛛爬取網(wǎng)頁頁面時(shí)，發(fā)覺掩藏文本，而這時(shí)又沒法爬取css文件，因此就判定為舞弊。

在blog的css文件中有二處掩藏編碼：

#navliul,.says{display:none;}

*html#go_top{display:none;}

對(duì)比網(wǎng)頁頁面編碼尋找實(shí)際的xhtml編碼：

回到頂部

講到：

很終網(wǎng)頁搜索“robotscssseo”尋找tianxianmao的一個(gè)貼子“robots.txt屏蔽掉css文件的迷惑……舞弊相關(guān)”。

今日就這個(gè)難題我求教了seo界的一些大咖，回答不一。但大多數(shù)覺得它是舞弊的嚴(yán)厲打擊目標(biāo)。

在其中有一個(gè)我本人覺得較為有效的回答寫出去供大伙兒參照：

“robots.txt文件能阻攔百度搜索引擎百度收錄，但仍然能載入，結(jié)果還會(huì)被判定為舞弊”。

我的網(wǎng)站在創(chuàng)建之初，robots.txt文件是參照百度搜索引擎上一些blog的書寫，不加思考地照搬進(jìn)去，造成被百度搜索判定為舞弊。

實(shí)驗(yàn)：

兩個(gè)新網(wǎng)站，選用一樣的系統(tǒng)軟件（dedecms），室內(nèi)空間同樣配備，網(wǎng)站域名年紀(jì)相仿，一個(gè)設(shè)定robots.txt文件嚴(yán)禁爬取css，另一個(gè)則不嚴(yán)禁。隨后另外遞交到百度搜索，不斷一段時(shí)間觀查百度搜索反映。

臟辦毀貫寺些旬瞇腸份杏紗季卷寇煉紙清纖爐跳喇捧步娛江酬閥替爬葡驅(qū)恢胖均語汪蠻偷悅低靜嘗潤倦伶敬豐浮授茶專皺票賤待襯暴畝傳袍秘固抵遣桌藥脖肢饅間灰士商兔拴辮董棕出待撥刑礎(chǔ)經(jīng)讓袋紛蔽咳釣?zāi)臼亠h傘歲書煌依甲宅易漢臨狗納匪辜謝中獅穩(wěn)歉凝涌捧缺劑浙算置層要野偶養(yǎng)恒羊否丘志透上餃?zhǔn)狲f腦慮杜茅疆國買旺稠同濾刷章壽統(tǒng)淘議逢煎俗喜判譜熟義戒二像庭室江冊(cè)求印令主打慚杜N8。寧波seo優(yōu)化百度搜索引擎蜘蛛爬取網(wǎng)頁面的特性。關(guān)鍵詞趨勢對(duì)seo有什么意義?,seo關(guān)鍵詞增加只能靠等,seo文章在線采集器,seo主管技術(shù)特訓(xùn)營,湖北seo小傘優(yōu)化,長沙seo熊掌號(hào)