
寫文章賺錢也是有一段時間了,(北京市網站建設)為何百度搜索引擎遲遲不百度收錄你的網頁頁面呢?想要知道每日都有哪些搜索引擎蜘蛛“拜會”你的網址嗎?作為一名wordpress客戶(北京市網站制作),必須了解每日都有哪些搜索引擎蜘蛛爬取過你的網址,便于于掌握各百度搜索引擎搜索引擎蜘蛛爬取頻率,對網址開展目的性的SEO網址優化。
其實不是很難,要是加上下列編碼,隨后再啟用文檔編碼就OK了,是否很便捷呢?那么就剛開始行動吧。
以前因為我找過好多個搜索引擎蜘蛛爬取紀錄專用工具PHP版,結果都不盡如人意。并且這種PHP程序流程大多數要開展安裝,也要將搜索引擎蜘蛛爬取紀錄加上到MYSQL中,有點不便。那么就找尋一個簡單的搜索引擎蜘蛛爬取記錄軟件吧~
googlebot
1.最先,在wordpress主題風格網站根目錄創建一個robots.php文件,載入以下幾點:
<?php
function get_naps_bot()
{
$useragent = strtolower($_SERVER['HTTP_USER_AGENT']);
if (strpos($useragent, ’googlebot’) !== false){
return ’Googlebot’;
}
if (strpos($useragent, ’msnbot’) !== false){
return ’MSNbot’;
}
if (strpos($useragent, ’slurp’) !== false){
return ’Yahoobot’;
}
if (strpos($useragent, ’baiduspider’) !== false){
return ’Baiduspider’;
}
if (strpos($useragent, ’sohu-search’) !== false){
return ’Sohubot’;
}
if (strpos($useragent, ’lycos’) !== false){
return ’Lycos’;
}
if (strpos($useragent, ’robozilla’) !== false){
return ’Robozilla’;
}
return false;
}
function nowtime(){
$date=gmdate(”Y-n-j H:i:s”,time() 8*3600);
return $date;
}
$searchbot = get_naps_bot();
if ($searchbot) {
$tlc_thispage = addslashes($_SERVER['HTTP_USER_AGENT']);
$url=$_SERVER['HTTP_REFERER'];
$file=”robotslogs.txt”;
$time=nowtime();
$data=fopen($file,”a”);
fwrite($data,”Time:$time robot:$searchbot URL:$tlc_thispage\n”);
fclose($data);
}
?>
將其提交于你的主題目錄內。
2.在Footer.php或header.php的適度部位加上下列編碼啟用robots.php。
<?php include(’robots.php’) ?>
程序流程基本原理:根據對搜索引擎蜘蛛標志符(如Baiduspider、Googlebot)的分辨,紀錄搜索引擎蜘蛛爬取時間,并轉化成日志文件robotslogs.txt于網站根目錄。
程序流程缺陷:沒法紀錄搜索引擎蜘蛛爬取的網頁頁面,作用比較簡單。
留下聯系方式,我們將會在一個工作日內與你聯系