作為網(wǎng)上創(chuàng)業(yè)的一個(gè)項(xiàng)目，新上馬的一個(gè)網(wǎng)站，上馬網(wǎng)站第一天提交，第二天就收錄首頁(yè)，并且品牌關(guān)鍵詞又不錯(cuò)的排名。但是第三天出現(xiàn)了一個(gè)問(wèn)題，就是百度快照變成了只剩下網(wǎng)址了，而且快照內(nèi)容是空白

早上SITE，百度收錄，到了晚上SITE,就發(fā)現(xiàn)被K了，到第二天早上，SITE一下，有收錄，還是只有網(wǎng)址，同時(shí)關(guān)鍵詞排名消失！這樣的情況到現(xiàn)在維持了有一個(gè)禮拜左右了，但是快照仍舊是只顯示網(wǎng)址。

出現(xiàn)這個(gè)問(wèn)題，開(kāi)始的時(shí)候心理不進(jìn)害怕，難道網(wǎng)站剛上線就受到百度的懲罰了？心理不免疑問(wèn)，網(wǎng)站也沒(méi)有違規(guī)操作，外鏈只是手工發(fā)了幾條，并沒(méi)有過(guò)激行為。

在百度上查找，發(fā)現(xiàn)有同學(xué)出現(xiàn)相同的問(wèn)題，但是并沒(méi)有找到有效的解決辦法。在谷歌搜索的時(shí)候，看到一個(gè)問(wèn)題，就是大家都知道淘寶是屏蔽百度蜘蛛的，可以打開(kāi)淘寶的robots.txt文件看一下，但是在百度搜一下淘寶還是有搜索結(jié)果的，也是只有網(wǎng)址，快照沒(méi)有顯示內(nèi)容

由此我想到，一定是蜘蛛抓取不到網(wǎng)頁(yè)的頁(yè)面內(nèi)容所致，而阻擋百度蜘蛛的一定就是robots.txt，我突然想起來(lái)，由于中間我換了后臺(tái)的CPS，根目錄下的文件夾有變化，就把robots.txt內(nèi)容修改過(guò)，我想這可能是百度蜘蛛抓取不到頁(yè)面的原因，因?yàn)榘俣葘?duì)robots.txt的反應(yīng)是有一段時(shí)間的。但是我又在想，這次改動(dòng)，并沒(méi)有禁止過(guò)蜘蛛爬行的語(yǔ)句。我心里覺(jué)得問(wèn)題還不在于這次改動(dòng)。

我有個(gè)習(xí)慣，就是在百度正式上馬之前，習(xí)慣用robots.txt禁止蜘蛛爬行，為的是怕蜘蛛提前收錄未架構(gòu)好的網(wǎng)站，想吧網(wǎng)站架構(gòu)好之后，在完全放開(kāi)。這個(gè)習(xí)慣的初衷是好的，對(duì)于谷歌是絕對(duì)沒(méi)問(wèn)題的。但是大家都知道，百度是比較弱智的，在更新方面也是比較遲鈍的，根據(jù)大家的經(jīng)驗(yàn)，百度對(duì) robots.txt的反應(yīng)是有一段時(shí)間的，因此我斷定，我的網(wǎng)站，百度還是認(rèn)為在之前的robots禁止?fàn)顟B(tài)。如果不出意外的話，過(guò)了這段適應(yīng)期，百度是會(huì)重新收錄的，因?yàn)榇藭r(shí)我的robots文件是正常的。

由此次問(wèn)題看出，提前禁止百度蜘蛛爬行，對(duì)于百度未必是好的方法，最好的方式，就是在網(wǎng)站上嗎之前，提前做好整個(gè)企劃，網(wǎng)站構(gòu)建在盡量短的時(shí)間內(nèi)完成，而不是像我之前，先禁止蜘蛛爬行，然后網(wǎng)址慢慢完善，這樣就有可能出現(xiàn)，百度對(duì)之前的robots.txt禁止?fàn)顟B(tài)長(zhǎng)時(shí)間反應(yīng)不過(guò)來(lái)，就會(huì)造成百度只收錄網(wǎng)址，快照顯示空白的情況發(fā)生。

下面是找到的兩個(gè)，看起來(lái)比較靠譜的原因：

一是，空間質(zhì)量不好，百度蜘蛛抓取首頁(yè)有誤，導(dǎo)致快照空白。（我使用的空間良好，不存在這個(gè)問(wèn)題，因此不是這個(gè)原因）。

二是，網(wǎng)站首頁(yè)程序的原因。
仔細(xì)查看網(wǎng)站程序后臺(tái)設(shè)置和前臺(tái)文件，發(fā)現(xiàn)首頁(yè)有兩個(gè)文件，一個(gè)是index.asp,另一個(gè)是index.html，而空間配置的默認(rèn)首頁(yè)文件是 index.html照常理應(yīng)該是優(yōu)先訪問(wèn)index.html的，這個(gè)是靜態(tài)文件，出于安全起見(jiàn)先把index.asp暫停使用，對(duì)于網(wǎng)站的訪問(wèn)和后臺(tái)的文件生成沒(méi)有影響，于是將index.asp刪除掉，等待收錄情況。第二天早上用站長(zhǎng)工具查詢時(shí)發(fā)現(xiàn)首頁(yè)快照收錄正常，快照日期是最新的，快照內(nèi)容也有了，標(biāo)題的收錄也完整了。至此，百度快照收錄空白內(nèi)容的情況已完全解決。

對(duì)于這個(gè)原因，我曾以為我就是這個(gè)原因，因?yàn)樵鼡Q了我的首頁(yè)文件，因?yàn)楣δ苄枰?，我把index.html修改為index.php了，這樣就有可能是百度一直收錄的我的html首頁(yè)，而不收我的php。但是我也做出否定，因?yàn)槲乙呀?jīng)刪除index.html，我的后臺(tái)只有index.php這個(gè)首頁(yè)文件，不存在蜘蛛收錄一個(gè)不存在的首頁(yè)的情況。除非首頁(yè)還在百度的緩存中，但是已經(jīng)一個(gè)禮拜了，k了收，收了k，快照隔天?？臻g后臺(tái)也是把 index.php作為默認(rèn)首頁(yè)。

因此，唯一讓我認(rèn)可的還是曾經(jīng)使用robots文件禁用過(guò)百度蜘蛛的原因，百度比較呆，看別人的案例，有的情況是，禁止爬行發(fā)開(kāi)后，四十多天才會(huì)重新收錄的案例。因?yàn)槲艺J(rèn)為，可能是百度蜘蛛對(duì)robots的反應(yīng)慢，依然認(rèn)為是在被禁止。下面是我搜索遇到的一種說(shuō)法：

這個(gè)現(xiàn)象目前主要有幾種可能
2.百度對(duì)robots的更新 要一段時(shí)間， 如果要讓其更快反映，請(qǐng)先刪除robots.txt ，猜測(cè) 之前禁止過(guò)蜘蛛。

我暫時(shí)先認(rèn)可這種辦法，先吧robots文件刪除，以圖百度快點(diǎn)反應(yīng)過(guò)來(lái)，重新收錄首頁(yè)！有沒(méi)有效果，后期會(huì)在這篇文章末尾補(bǔ)充。

補(bǔ)充：就在剛剛這篇文章完成之時(shí)，我回頭SITE了一下，發(fā)現(xiàn)快照竟然恢復(fù)了，

我不知道是我今天投訴快照的原因，還是，我把后臺(tái)的默認(rèn)首頁(yè)，全都刪掉的原因，如果能保持長(zhǎng)久不再恢復(fù)的話，那就是默認(rèn)首頁(yè)的問(wèn)題了，但是我還是覺(jué)得，可能是今天投訴快照的原因。拭目以待，繼續(xù)觀察中……

最新評(píng)論