服务器之家:专注于服务器技术及软件下载分享
分类导航

PHP教程|ASP.NET教程|Java教程|ASP教程|编程技术|正则表达式|C/C++|IOS|C#|Swift|Android|VB|R语言|JavaScript|易语言|vb.net|

服务器之家 - 编程语言 - PHP教程 - PHP写的获取各搜索蜘蛛爬行记录代码

PHP写的获取各搜索蜘蛛爬行记录代码

2020-01-07 16:20PHP教程网 PHP教程

做为站长每天都想知道自己的网站百度蜘蛛等搜索引擎爬虫是否了网站 来抓取文章,一般站长不知道怎么搞用工具查询,也可以查看空间里的日志,但是空间里的日志的记录全是代码你不知道那个是搜索引擎爬虫的来路

那么下面分享一款用php写的获取各搜索蜘蛛爬行记录代码 
支持搜索引擎如下 
可以记录Baidu,Google,Bing,Yahoo,Soso,Sogou,Yodao爬行网站的记录! 
php代码如下 

复制代码代码如下:


<?php 
function get_naps_bot() 

$useragent = strtolower($_SERVER['HTTP_USER_AGENT']); 
if (strpos($useragent, 'googlebot') !== false){ 
return 'Google'; 

if (strpos($useragent, 'baiduspider') !== false){ 
return 'Baidu'; 

if (strpos($useragent, 'msnbot') !== false){ 
return 'Bing'; 

if (strpos($useragent, 'slurp') !== false){ 
return 'Yahoo'; 

if (strpos($useragent, 'sosospider') !== false){ 
return 'Soso'; 

if (strpos($useragent, 'sogou spider') !== false){ 
return 'Sogou'; 

if (strpos($useragent, 'yodaobot') !== false){ 
return 'Yodao'; 

return false; 

function nowtime(){ 
$date=date("Y-m-d.G:i:s"); 
return $date; 

$searchbot = get_naps_bot(); 
if ($searchbot) { 
$tlc_thispage = addslashes($_SERVER['HTTP_USER_AGENT']); 
$url=$_SERVER['HTTP_REFERER']; 
$file="www.zzvips.com.txt"; 
$time=nowtime(); 
$data=fopen($file,"a"); 
fwrite($data,"Time:$time robot:$searchbot URL:$tlc_thispage\n"); 
fclose($data); 

////www.zzvips.com收集整理 
?> 

延伸 · 阅读

精彩推荐