我們先說現(xiàn)象吧，如果對SEO有進一步了解的人應該跟搜索引擎對話會第一時間考慮到網(wǎng)站的日志。日志里可以分析出網(wǎng)站被蜘蛛抓取了哪些頁面，什么時候來的，在這個頁面上停留了多少時間等等。

 

    我們發(fā)現(xiàn)蜘蛛只抓取某一個頁面。特別多的現(xiàn)象就是網(wǎng)站的首頁，我們同時也發(fā)現(xiàn)蜘蛛他只來不抓取，我們可以看返回碼。我們甚至可以監(jiān)控蜘蛛來的次數(shù)。我們針對百度baiduspider來說，當我們在站外一些鏈接的引導，來增加蜘蛛的抓取量，我們通過增加內(nèi)容的權重與網(wǎng)站的權重來讓搜索引擎收錄。但我也發(fā)現(xiàn)了這么一個問題。

 

    百度蜘蛛每天都會來，百度蜘蛛每天也都會來抓取信息，以及robots文件的訪問就是不訪問網(wǎng)站的內(nèi)面以及其它的相關信息。如果你再去做網(wǎng)站的外部鏈接，換來的也是同樣的結果。當然我說的情況可能是少數(shù)，但這個情況一定存在，我確實也遇到過。我做下分析與排除跟大家分享下：

 

    做任何的事都要先做問題的分析再做一一的排除。我們分別從架構、內(nèi)容、域名的角度出發(fā)去分析。

 

    從網(wǎng)站的架構來說，有些朋友可能會說了，網(wǎng)站不收錄跟你的結構與程序肯定有關系。那么我們假設這個情況是真的，換一句角度來說我們要做的就是用某個形式去做一個新的頁面出來，網(wǎng)站的內(nèi)容結構頁面跟目前的網(wǎng)站要不一樣，來測試下效果。

 

    我們在原有的網(wǎng)站中新建了一個Z-BLOG博客，來做測試。同樣當我們新建了博客后第一步要做的就是，把新的地址提交給百度，然后再針對這個URL去做一些外部鏈接，盡可能的去引蜘蛛過來。當然經(jīng)過幾天后我們也可以從日志中查看到蜘蛛是否來過，以及他的來訪問路徑。

 

    我們再從內(nèi)容的角度來說。這個可能要去做測試那么就必須得要用一個合理的程序與網(wǎng)站來做測試。在這里寧波SEO何濤提醒大家的操作方法是，你必須要用另一個網(wǎng)站來操作。

 

    我們在新的網(wǎng)站中把網(wǎng)站的原有內(nèi)容全部拷貝下來，再上傳。等百度蜘蛛來。這里我要說一下，為什么要用新的網(wǎng)站。如果我們在老的網(wǎng)站中操作，一定會遇到上面一樣的情況，本身網(wǎng)站就有問題，用有問題的網(wǎng)站去操作與測試，百度蜘蛛不會來也是正常的。更加不要說會來收錄我們的網(wǎng)頁。

 

    最后一個我說的是域名角度。如果你對我說的第二個測試有聽懂的話，那么你一定會問其實你已經(jīng)做了測試。但這里何濤還有辦法去做測試

 

    相信一般的網(wǎng)站都會有備份，如果說條件好的話，還會有專門的備份服務器，我們可以用一個新的域名去解析到那個備份服務器中，我們用一周左右的時間去看看效果。