百度蜘蛛抓取網(wǎng)頁的規(guī)則習慣你知道多少？

作為一個網(wǎng)站優(yōu)化人員，首先我們需要了解搜索引擎抓取系統(tǒng)工作原理，今天成都網(wǎng)站優(yōu)化的小編就簡要給大家介紹一下如何建立網(wǎng)站是符合搜索引擎抓取系統(tǒng)習慣的。

1、簡單明了的網(wǎng)站結(jié)構(gòu)

(1)樹型結(jié)構(gòu)最優(yōu)的結(jié)構(gòu)即“首頁—頻道—詳情頁”;

(2)扁平首頁到詳情頁的層次盡量少，既對抓取友好又可以很好的傳遞權(quán)重。

(3)網(wǎng)狀保證每個頁面都至少有一個文本鏈接指向，可以使網(wǎng)站盡可能全面的被抓取收錄，內(nèi)鏈建設(shè)同樣對排序能夠產(chǎn)生積極作用。

(4)導航為每個頁面加一個導航方便用戶知曉所在路徑。

(5)子域與目錄的選擇相信有大批的站長對此有疑問，當內(nèi)容較少并且內(nèi)容相關(guān)度較高時建議以目錄形式來實現(xiàn)，有利于權(quán)重的繼承與收斂;當內(nèi)容量較多并且與主站相關(guān)度略差時建議再以子域的形式來實現(xiàn)。

2、簡潔美觀的url規(guī)則

(1)唯一性網(wǎng)站中同一內(nèi)容頁只與唯一一個url相對應，過多形式的url將分散該頁面的權(quán)重，并且目標url在系統(tǒng)中有被濾重的風險;

(2)簡潔性動態(tài)參數(shù)盡量少，保證url盡量短;

(3)美觀性使得用戶及機器能夠通過url即可判斷出頁面內(nèi)容的主旨;

我們推薦如下形式的url：url盡量短且易讀使得用戶能夠快速理解，例如使用拼音作為目錄名稱;同一內(nèi)容在系統(tǒng)中只產(chǎn)生唯一的url與之對應，去掉無意義的參數(shù);如果無法保證url的唯一性，盡量使不同形式的url301到目標url;防止用戶輸錯的備用域名301至主域名。

3、其他注意事項

(1)不要忽略倒霉的robots文件，默認情況下部分系統(tǒng)robots是封禁搜索引擎抓取的，當網(wǎng)站建立后及時查看并書寫合適的robots文件，網(wǎng)站日常維護過程中也要注意定期檢查;

(2)建立網(wǎng)站sitemap文件、死鏈文件，并及時通過百度站長平臺進行提交;

(3)部分電商網(wǎng)站存在地域跳轉(zhuǎn)問題，有貨無貨建議統(tǒng)一做成一個頁面，在頁面中標識有無貨即可，不要此地區(qū)無貨即返回一個無效頁面，由于spider出口的有限性將造成正常頁面無法收錄。

本文名稱：百度蜘蛛抓取網(wǎng)頁的規(guī)則習慣你知道多少？
新聞來源：http://bm7419.com/news/84441.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供企業(yè)網(wǎng)站制作、全網(wǎng)營銷推廣、動態(tài)網(wǎng)站、Google、定制網(wǎng)站、網(wǎng)站排名

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)