百度站長(zhǎng)工具抓取診斷失敗的原因分析

對(duì)于SEO站長(zhǎng)，經(jīng)常會(huì)使用百度站長(zhǎng)平臺(tái)的抓取診斷工具，主要作用是以百度蜘蛛的角度去分析網(wǎng)站的內(nèi)容，判斷百度蜘蛛的抓取情況，解決了百度蜘蛛與seo站長(zhǎng)們眼中內(nèi)容是否一致的問(wèn)題。如果經(jīng)常出現(xiàn)抓取失敗，那會(huì)大大的影響網(wǎng)站的正常收錄，下面筆者來(lái)分析一下百度抓取診斷失敗的原因有哪些。網(wǎng)站建設(shè)★網(wǎng)站設(shè)計(jì)★網(wǎng)站制作★網(wǎng)頁(yè)設(shè)計(jì)-800元全包;企業(yè)網(wǎng)絡(luò)推廣☆網(wǎng)站優(yōu)化☆seo☆關(guān)鍵詞排名☆百度快照-2200元全年展示;做網(wǎng)站優(yōu)化排名-網(wǎng)站建設(shè)公司

成都創(chuàng)新互聯(lián)公司專(zhuān)業(yè)為企業(yè)提供常山網(wǎng)站建設(shè)、常山做網(wǎng)站、常山網(wǎng)站設(shè)計(jì)、常山網(wǎng)站制作等企業(yè)網(wǎng)站建設(shè)、網(wǎng)頁(yè)設(shè)計(jì)與制作、常山企業(yè)網(wǎng)站模板建站服務(wù)，10余年常山做網(wǎng)站經(jīng)驗(yàn)，不只是建網(wǎng)站，更提供有價(jià)值的思路和整體網(wǎng)絡(luò)服務(wù)。

1.301或302重定向設(shè)置錯(cuò)誤

301重定向是指百度蜘蛛訪問(wèn)鏈接時(shí)發(fā)生了跳轉(zhuǎn)，如果跳轉(zhuǎn)后的鏈接超長(zhǎng)或者連續(xù)跳轉(zhuǎn)的次數(shù)超過(guò)5次，就會(huì)發(fā)生重定向錯(cuò)誤而導(dǎo)致抓取失敗。

2.網(wǎng)站訪問(wèn)速度

很多SEO站長(zhǎng)表示，在本地測(cè)試訪問(wèn)時(shí)候，返回的HTTP狀態(tài)碼是200，但是抓取診斷就一直顯示抓取中，沒(méi)有反饋任何結(jié)果，這是由于服務(wù)器的線路不同，百度蜘蛛抓取的速度可能發(fā)生延時(shí)，就會(huì)產(chǎn)生明明可以正常訪問(wèn)，卻出現(xiàn)抓取失敗的情況。一般遇到這種情況需要定期檢測(cè)服務(wù)器各地訪問(wèn)速度，優(yōu)化網(wǎng)站的打開(kāi)訪問(wèn)速度。

3.robots.txt封禁

在抓取診斷工具中如果返回的抓取失敗，請(qǐng)確認(rèn)你是否對(duì)該網(wǎng)站設(shè)置了robots.txt封禁，阻止百度蜘蛛抓取網(wǎng)站的某些內(nèi)容，如果你未使用robots.txt文件屏蔽百度，請(qǐng)點(diǎn)擊旁邊的報(bào)錯(cuò)鏈接，百度會(huì)立即更新你網(wǎng)站的robots信息；如果是你的誤操作導(dǎo)致了robots.txt封禁，請(qǐng)及時(shí)修改robots文件，避免造成你的網(wǎng)站在百度收錄量影響。

4.DNS錯(cuò)誤問(wèn)題

DNS錯(cuò)誤是指由于服務(wù)器停止運(yùn)行或DNS到你網(wǎng)域的路由存在問(wèn)題，導(dǎo)致百度蜘蛛無(wú)法與DNS服務(wù)器通信。對(duì)于持續(xù)的或反復(fù)出現(xiàn)的DNS錯(cuò)誤，請(qǐng)與你的DNS提供商聯(lián)系處理。通常情況下，你的DNS提供商即為網(wǎng)站服務(wù)器托管服務(wù)提供商，配置你的服務(wù)器，使其能夠以404或500等HTTP錯(cuò)誤代碼對(duì)不存在的主機(jī)名作出響應(yīng)。

5.404錯(cuò)誤

一般情況下，當(dāng)百度蜘蛛訪問(wèn)到不存在的網(wǎng)頁(yè)（因?yàn)槟銊h除或重命名了網(wǎng)頁(yè)且沒(méi)有將舊網(wǎng)址重定向到新網(wǎng)頁(yè)，或者鏈接中存在拼寫(xiě)錯(cuò)誤）時(shí)，就會(huì)出現(xiàn)“未找到”狀態(tài)錯(cuò)誤（通常是404 HTTP狀態(tài)代碼），404錯(cuò)誤也會(huì)導(dǎo)致抓取失敗。

6.訪問(wèn)遭拒絕

一般情況下，百度會(huì)通過(guò)跟蹤網(wǎng)頁(yè)間的鏈接來(lái)查找內(nèi)容。百度蜘蛛必須能夠訪問(wèn)某個(gè)網(wǎng)頁(yè)才能抓取該網(wǎng)頁(yè)。如果你意外地看到了“訪問(wèn)遭拒”的錯(cuò)誤，可能是由于以下幾種原因?qū)е碌模?/p>

（1）百度spider無(wú)法訪問(wèn)您網(wǎng)站上的網(wǎng)址，因?yàn)槟憔W(wǎng)站上的所有或部分內(nèi)容要求用戶登錄后才能查看。

（2）你的服務(wù)器要求用戶使用代理進(jìn)行身份驗(yàn)證，或者您的托管服務(wù)提供商阻止百度蜘蛛訪問(wèn)你的網(wǎng)站。

總結(jié)：

百度站長(zhǎng)工具抓取診斷失敗的原因還有很多，以上筆者分析了一些常見(jiàn)的，提供給大家參考，需要逐一排除找出原因。

當(dāng)前題目：百度站長(zhǎng)工具抓取診斷失敗的原因分析
文章源于：http://www.bm7419.com/article7/dghecoj.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供微信公眾號(hào)、自適應(yīng)網(wǎng)站、動(dòng)態(tài)網(wǎng)站、網(wǎng)站內(nèi)鏈、面包屑導(dǎo)航、網(wǎng)頁(yè)設(shè)計(jì)公司

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)