百度蜘蛛的referrer有什么用?

2013-11-18    分類: 網(wǎng)站建設(shè)

  百度蜘蛛的referrer是什么來的?在SEO優(yōu)化中需要站長去留意嗎?今天跟著創(chuàng)新互聯(lián)SEO,我們一同來探討這個問題。

百度蜘蛛的referrer

  百度蜘蛛的referrer,是指當(dāng)百度蜘蛛訪問網(wǎng)站某一個URL的時候,在HTTP頭中標(biāo)識的referrer字段。請注意,這個定義和百度最近聲明去除referrer中關(guān)鍵詞數(shù)據(jù)沒有任何關(guān)系。

  對于站長的意義:

  如果你關(guān)心百度從哪個頁面上發(fā)現(xiàn)了當(dāng)前這個URL的話(可以理解為抓取軌跡),那么這個字段是唯一的參考依據(jù)。如果你發(fā)現(xiàn)有一批URL報錯(4xx或者5xx),但是一直找不到入口在哪,也就是說你不明白百度蜘蛛是從哪里發(fā)現(xiàn)這些錯誤URL的。這個字段可以幫助你迅速定位。

  下面看一個具體例子:

  比如我們的SEO日志分析系統(tǒng)中可以看到,符合下面這種URL Pattern的路徑每天有6萬到10萬的抓取而且全部報404。

  

百度蜘蛛的referrer

  從發(fā)現(xiàn)問題至今過了1個月,查遍整個網(wǎng)站我也沒找到入口。今天偶然仔細(xì)查了一下日志,想起了百度蜘蛛的referrer,馬上就能定位問題了。這些404的URL來自于一套沒人維護也沒人關(guān)注的頁面(往往是這樣)。收錄流量都不錯。由于最近公司圖片系統(tǒng)更新,圖片的URL全部更改了,但這套頁面并沒有跟著更新。

  通過上面的例子,以后如果大家的站點遇到了類似的問題,不妨嘗試通過百度蜘蛛的referrer來試著解決。

本文名稱:百度蜘蛛的referrer有什么用?
本文鏈接:http://www.bm7419.com/news/4503.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站收錄、微信小程序、電子商務(wù)、網(wǎng)站設(shè)計、ChatGPT搜索引擎優(yōu)化

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)

營銷型網(wǎng)站建設(shè)