網站收錄良好與否跟蜘蛛爬行頻繁次數、抓取頁面有關是眾所周知的,但是對於蜘蛛抓取了哪些頁面我們不知道,那麼我們只能依靠蜘蛛爬行過的訪問日誌進行分析了。從日誌中我們可以分析出很多的數據,那麼今天筆者主要跟大家講解一下影響蜘蛛抓取的因素和爬行時間,不要小看這個日誌,它可以幫助你知道網站對於蜘蛛來說,是不是意味著友善的狀態,蜘蛛喜不喜歡自己的站,如果爬行量大的話,那麼就可以簡單的得出網站很合蜘蛛的胃口,如果蜘蛛幾天都不來的話,那麼就要檢查一下,是不是網站沒有蜘蛛喜歡的「食物」了,以下就說說影響抓取的相關重點:
影響蜘蛛抓取因素一,是否有網站地圖
網站地圖對蜘蛛來說就是一幅爬行路線圖,當蜘蛛擁有了這張路線圖的時候,那麼在網站上爬行就不會那麼的吃力,而且也不會有隨時會轉到頭暈的感覺。網站地圖是專門給蜘蛛用的,目的就是減少蜘蛛爬行時間,加快蜘蛛爬行速度,畢竟,如果你的網站不配地圖的話,就像自己去一個陌生的地方,沒有地圖,就要靠盲目的找了,這要花的時間多了多少,筆者不知道。所以,同樣的道理,網站地圖對蜘蛛來說也一樣的重要,省什麼都不要省了地圖,他是戰前的準備、戰中的方向、戰後的總結。
影響蜘蛛抓取因素二,是否設定404頁面
很多的網站對於這個根本不在意,其實按筆者的實戰心得來說,這個對於一個存在死鏈的網站有著很重要的意義,因為他可以幫網站告訴蜘蛛,當它爬到死角的時候,給他一條出來返生之道,404頁面就是為了避免蜘蛛走進死胡同出不來而準備的,誰敢保證自己的網站不會有死鏈的出現,死鏈對於一個網站的影響是很重要的,如果網站的死鏈過多,又缺少404頁面,那麼用站長工具查詢分析的時候,你會發現,很多的頁面都抓取錯誤,這一方面說明,網站對蜘蛛的友好度不夠,讓蜘蛛產生排斥的心理。所以,404頁一定要給網站上一個,反正又不佔多大的空間,為什麼不搞上呢?
影響蜘蛛抓取因素三,是否導出連結過多
一個網站過多的導出鏈接,對於網站的權重集中有很大的影響,對於蜘蛛的逗留時間有很大的催促作用,因為當蜘蛛爬行你的網站的時候,一般都是由頭爬到尾的,那麼蜘蛛爬行有時候是按廣度爬行法,有時按深度排行法,當它按廣度排行法的時候,剛好爬到尾部而還沒進入內頁,你就給他來一條導出鏈接,那麼蜘蛛也會按照其導出連結出去的,這樣就是你經常看到的蜘蛛來了,但是沒收錄任何頁面的原因了。所以,網站不要設置過多的導出鏈接,他給你的網站沒有任何的利益。
影響蜘蛛抓取因素四,是否導入連結過少
相對導出鏈接,那麼導入鏈接就是越多越好了。導入連結要遵從兩個原則:廣泛度與品質。先有質才有量,所以,咱們建造導入連結的時候,要先註重導入連結的質,然後再追求量。如果你顛倒過來的話,那麼不但不能讓網站對搜索引摯友好,而且還會讓網站在搜索引摯眼裡減分。因為你追求量的時候,通常都會把質忘了,造成了擁有過多的垃圾鏈、無效連結。所以,導入連結最講究的是質與廣,只有兩者很好的結合在一起,才能讓網站排名權重刷刷的往上漲。
透過分析網站對搜尋引摯的友善度來總結出以上四點,這四點是筆者實踐得來的心得經驗,希望可以幫助你或多或少的了解網站。進而使自己的網站收錄更好,權重更高,快照更新,排名更牛。本文由http://www.yisoo.org (一搜影院)獨家供稿,轉載請留鏈接,謝謝!
責任編輯:陳龍作者yuqing 的個人空間
-