死鏈太多,建議你在robot.txt中禁止收錄那些沒用的頁面,對你的網站非常不好
創(chuàng)新互聯公司是一家集成都網站制作、做網站、外貿營銷網站建設、網站頁面設計、網站優(yōu)化SEO優(yōu)化為一體的專業(yè)的建站公司,已為成都等多地近百家企業(yè)提供網站建設服務。追求良好的瀏覽體驗,以探求精品塑造與理念升華,設計最適合用戶的網站頁面。 合作只是第一步,服務才是根本,我們始終堅持講誠信,負責任的原則,為您進行細心、貼心、認真的服務,與眾多客戶在蓬勃發(fā)展的市場環(huán)境中,互促共生。
新建一個.php文件并把它命名為spider,把以下代碼復制到文件里;
?php
functionget_naps_bot()
{
$useragent =strtolower($_SERVER['HTTP_USER_AGENT']);
if(strpos($useragent,'googlebot')!==false){
return'Googlebot';
}
if(strpos($useragent,'msnbot')!==false){
return'MSNbot';
}
if(strpos($useragent,'slurp')!==false){
return'Yahoobot';
}
if(strpos($useragent,'baiduspider')!==false){
return'Baiduspider';
}
if(strpos($useragent,'sohu-search')!==false){
return'Sohubot';
}
if(strpos($useragent,'lycos')!==false){
return'Lycos';
}
if(strpos($useragent,'robozilla')!==false){
return'Robozilla';
}
returnfalse;
}
functionnowtime(){
$date=gmdate("Y-n-j H:i:s",time()+8*3600);
return$date;
}
$searchbot =get_naps_bot();
if($searchbot){
$tlc_thispage =addslashes($_SERVER['HTTP_USER_AGENT']);
$url=$_SERVER['HTTP_REFERER'];
$file="spiderlogs.txt";
$time=nowtime();
$data=fopen($file,"a");
fwrite($data,"Time:$time robot:$searchbot URL:$tlc_thispagen");
fclose($data);
}
?
2
把制作好的spider.php文件上傳至主題根目錄中(注意不是網站根目錄);
3
把以下代碼復制在主題的footer.php里面(后臺—外觀—編輯—footer.php),我是放在最下面;
!--?php include('spider.php') ?--!--蜘蛛記錄--
4
查看方法:瀏覽器訪問,把域名換成你的就可以了。(注:也可以查看網站根目錄里面的spiderlogs.txt文件),
要使Wordpress網站同意蜘蛛收錄,需要修改 Robots.txt 文件,讓它不再阻擋網站頁面被搜索引擎抓取。
Robots.txt文件位于Wordpress網站根目錄下。在文件中,要添加以下代碼:
User-agent: *
Allow: /
上面的代碼表示,允許所有的蜘蛛抓取網站的所有頁面。
有很多站長朋友的個人wordpress博客或者是其他站點,在php空間中安裝之后設置了文章保護措施,那就是文章加密,可能有一些隱私不外公布,或者是收費的標準,而這些文章只要在站點上面掛著,沒有任何的設置,可能就會被蜘蛛給收取,但是站長朋友們不想讓這樣的事情發(fā)生,而要禁止蜘蛛的收錄,來達到他們的愿望。
今天無憂主機小編在上班的時候就遇到這樣的事情的發(fā)生,可能是有預感吧,小編當時還認為看的這篇資料應該會有很多的站長朋友都知道,可是讓無憂主機小編很是無奈,原因很簡單,因為站長朋友們搞不清楚,哪個文章有作用還是沒有作用,所以急需要小編來看看,還好無憂主機小編懂那么一點點,給站長朋友講解之后,他們也相信,此做法呢是非常之有效,所以呢,無憂主機小編就寫下這篇文章,希望能幫助更多的站長朋友!
找到主題目錄下:functions.php,移到最后有一個php結束符號?,然后把一下代碼復制進去:
?
view code
1
2
3
4
5
6
7
function password_noindex_header() {
global $post;
if (!empty($post-post_password)) {
echo 'meta name="robots" content="noindex"'."\n";
}
}
add_action('wp_head', 'password_noindex_header');
如果您所用的主題有專門seo文件,就到目錄includes/seo.php在is_page之前有一個?php}?,那么就在?php之后加入一下代碼:
?
view code
1
2
3
if (!empty($post-post_password)) {
echo 'meta name="robots" content="noindex" /'."\n";
}
好了,這樣我們就成功了設置密碼文章蜘蛛不能收錄的問題。
網頁標題:wordpress蜘蛛 word蜘蛛網圖
URL鏈接:http://bm7419.com/article26/dohgicg.html
成都網站建設公司_創(chuàng)新互聯,為您提供商城網站、小程序開發(fā)、定制網站、企業(yè)建站、微信小程序、域名注冊
聲明:本網站發(fā)布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創(chuàng)新互聯