成都網(wǎng)站設(shè)計(jì)網(wǎng)絡(luò)推廣怎樣避免蜘蛛陷阱

2024-01-07    分類(lèi): 網(wǎng)站建設(shè)

成都網(wǎng)站設(shè)計(jì)網(wǎng)絡(luò)推廣公司創(chuàng)新互聯(lián)今天跟大家分享:怎樣避免蜘蛛陷阱

做SEO應(yīng)該都知道,網(wǎng)站被搜索引擎收錄是關(guān)鍵,如果你的站點(diǎn)沒(méi)有被搜索引擎收錄,那么SEO就無(wú)從談起。所以要想網(wǎng)站能夠被搜索引擎發(fā)現(xiàn)且網(wǎng)頁(yè)能夠被搜索引擎正常收錄,那么首先就得使自己的站點(diǎn)便于蜘蛛的爬行。搜索引擎爬取網(wǎng)頁(yè)的工具被稱(chēng)之為蜘蛛或爬蟲(chóng)機(jī)器人,英文名即robot。
這些蜘蛛沿著超鏈接爬取我們的眾多頁(yè)面,但是有些頁(yè)面是爬不到的,有的是因?yàn)榫W(wǎng)站自身存在一些不利于蜘蛛爬行,導(dǎo)致其對(duì)應(yīng)的頁(yè)面很難被搜索引擎收錄,這樣就形成了“蜘蛛陷阱”,一般指的是對(duì)搜索引擎不友好的網(wǎng)站制作技術(shù),這些技術(shù)不利于蜘蛛爬取我們的頁(yè)面,為了避免這種情況,總結(jié)了一下有以下幾個(gè)因素,防止蜘蛛進(jìn)入陷阱。

1:采用session id的頁(yè)面

有的銷(xiāo)售類(lèi)站點(diǎn)為了分析用戶的某些信息會(huì)采用會(huì)話ID來(lái)跟蹤用戶,訪問(wèn)站點(diǎn)的時(shí)候每個(gè)用戶訪問(wèn)都會(huì)增加一次session id而加入到URL中,同樣蜘蛛的每一次訪問(wèn)也會(huì)被當(dāng)做為一個(gè)新用戶,每次蜘蛛來(lái)訪問(wèn)的URL中都會(huì)加入一個(gè)session id,這樣就會(huì)產(chǎn)生了同一個(gè)頁(yè)面但URL不同的情況,這種的一來(lái)會(huì)產(chǎn)生復(fù)制內(nèi)容頁(yè)面,造成了高度重復(fù)的內(nèi)容頁(yè),同時(shí)也是常見(jiàn)的蜘蛛陷阱之一。

2:常識(shí)性的蜘蛛陷阱,采用強(qiáng)制注冊(cè)或登錄才能訪問(wèn)的頁(yè)面

這種的對(duì)于蜘蛛來(lái)說(shuō)就相當(dāng)為難了,因?yàn)橹┲霟o(wú)法提交注冊(cè)更無(wú)法輸入用戶名和密碼登錄查看內(nèi)容,對(duì)于蜘蛛來(lái)說(shuō)我們直接點(diǎn)擊查看到的內(nèi)容也是蜘蛛所能看到的內(nèi)容。

3:喜歡采用flash的站點(diǎn)

之所以說(shuō)是喜歡采用flash的站點(diǎn)是因?yàn)閷?duì)于一些中小型企業(yè)來(lái)說(shuō),因?yàn)閒lash本身可以做很多種效果,尤其是放在導(dǎo)航上視覺(jué)效果強(qiáng),所以不少企業(yè)站喜歡弄個(gè)flash來(lái)展示自己公司的實(shí)力,文化,產(chǎn)品等,甚至一些企業(yè)站點(diǎn)的網(wǎng)站首頁(yè)就是一個(gè)flash,要么是在多長(zhǎng)時(shí)間后通過(guò)flash跳轉(zhuǎn)到另外一個(gè)頁(yè)面,要么就是通過(guò)flash上的鏈接讓用戶自己點(diǎn)擊后進(jìn)入一個(gè)新的頁(yè)面,但是對(duì)于蜘蛛來(lái)說(shuō)一來(lái)是很難讀取flash中的內(nèi)容,所以蜘蛛也很難點(diǎn)擊flash上的鏈接。

4:動(dòng)態(tài)URL

在url中加入過(guò)多的符號(hào)或者網(wǎng)址參數(shù)等,這種蜘蛛陷阱我在url優(yōu)化中曾經(jīng)有提到,雖然說(shuō)隨著搜索引擎的的技術(shù)發(fā)展,動(dòng)態(tài)url對(duì)于蜘蛛的抓取已經(jīng)越來(lái)越不是問(wèn)題了,但是從搜索引擎友好度上來(lái)講,靜態(tài)哪怕是偽靜態(tài)url相對(duì)來(lái)說(shuō)都比動(dòng)態(tài)url要好,可以看下很多SEO同行對(duì)于url中的處理方式。

5:框架

在早期框架到處被泛濫使用,而現(xiàn)在框架網(wǎng)頁(yè)很多網(wǎng)站已經(jīng)很少使用了,一是因?yàn)楝F(xiàn)在隨著各大CMS系統(tǒng)的開(kāi)發(fā)問(wèn)世,網(wǎng)站維護(hù)相對(duì)也越來(lái)越簡(jiǎn)單了,早期網(wǎng)站使用框架是因?yàn)閷?duì)網(wǎng)站頁(yè)面的維護(hù)有一定的便利性了,現(xiàn)在已經(jīng)大可不必了,而且不利于搜索引擎收錄也是框架越來(lái)越少被使用的原因之一。

6:JS

雖然現(xiàn)在搜索引擎對(duì)于javascript里的鏈接是可以跟蹤甚至在嘗試拆解分析的,但是我們好不要寄望于搜索引擎自己克服困難,雖然說(shuō)通過(guò)js可以做一些效果不錯(cuò)的導(dǎo)航,但是css同樣可以做到;為了提高網(wǎng)站對(duì)搜索引擎的友好度建議使網(wǎng)頁(yè)能夠更好的蜘蛛爬行,就盡量不要采用js,當(dāng)然在seo中,js有一個(gè)好處就是站長(zhǎng)不希望被收錄的頁(yè)面或者友情鏈接可以采用js。還有一種方法可以消除JavaScript 蜘蛛程序陷阱,即使用< noscript >標(biāo)簽。< noscript >標(biāo)簽是為不支持JavaScript 的瀏覽器提供備選的代碼。蜘蛛程序不會(huì)執(zhí)行JavaScript, 因此他們通過(guò)處理< noscript >代碼來(lái)代替。

7:深層次的網(wǎng)頁(yè)

有的網(wǎng)頁(yè)沒(méi)有入口,而且距離網(wǎng)站的首頁(yè)又很遠(yuǎn),這種頁(yè)面就相對(duì)較難被蜘蛛爬行到,當(dāng)然對(duì)于那些權(quán)重高的網(wǎng)站可能會(huì)另當(dāng)別論了。網(wǎng)站的頁(yè)面要被收錄,首先要需要基本的權(quán)重,首頁(yè)的權(quán)重一般是高的,然后首頁(yè)的權(quán)重是可以傳遞到內(nèi)頁(yè)的,當(dāng)內(nèi)部頁(yè)面的權(quán)重上升到可以被收錄的門(mén)檻,頁(yè)面就會(huì)被收錄,按照這種理論,頁(yè)面之間的權(quán)重傳遞是會(huì)遞減的,因此,內(nèi)頁(yè)和首頁(yè)的點(diǎn)擊距離越近,越容易得到更多的首頁(yè)權(quán)重傳遞。良好的網(wǎng)站結(jié)構(gòu)可以讓網(wǎng)站更多的頁(yè)面被收錄。

8:強(qiáng)制使用cookies

對(duì)于搜索引擎來(lái)說(shuō)是相當(dāng)于直接禁用了cookies的,而有些網(wǎng)站為了實(shí)現(xiàn)某些功能會(huì)采取強(qiáng)制cookies,比如說(shuō)跟蹤用戶訪問(wèn)路徑,記住用戶信息,甚至是**用戶隱私等,如果用戶在訪問(wèn)這類(lèi)站點(diǎn)時(shí)沒(méi)有啟用cookies,所顯示的頁(yè)面就會(huì)不正常,所以對(duì)于蜘蛛來(lái)講同樣的網(wǎng)頁(yè)無(wú)法正常訪問(wèn)。

9:各種形式的跳轉(zhuǎn)

對(duì)于301重定向相信很多seo童鞋已經(jīng)非常熟悉了,但是對(duì)于其他302,或者meta refresh,javascript,flash等跳轉(zhuǎn),蜘蛛是很反感的,而且301也是不到萬(wàn)不得已的時(shí)候采用,任何跳轉(zhuǎn)都會(huì)在一定程度上給蜘蛛的爬行帶來(lái)障礙,所以你你懂得。

10:robots.txt書(shū)寫(xiě)錯(cuò)誤和各種各樣的作弊手法

比如說(shuō)隱藏文字,隱藏鏈接等,采用偽裝網(wǎng)頁(yè)在判斷來(lái)訪者是蜘蛛還是普通瀏覽器者而顯示不同的網(wǎng)頁(yè),使用默認(rèn)錯(cuò)誤的404頁(yè)面等,同樣會(huì)給蜘蛛帶來(lái)爬行障礙。

分享文章:成都網(wǎng)站設(shè)計(jì)網(wǎng)絡(luò)推廣怎樣避免蜘蛛陷阱
當(dāng)前路徑:http://www.bm7419.com/news21/312421.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供外貿(mào)建站全網(wǎng)營(yíng)銷(xiāo)推廣商城網(wǎng)站、電子商務(wù)、面包屑導(dǎo)航、自適應(yīng)網(wǎng)站

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)

微信小程序開(kāi)發(fā)