js 判断是否蜘蛛抓取(检测日志中蜘蛛搜索记录)

发布时间:2020-07-02编辑:脚本学堂
一段js代码,用于判断是否蜘蛛抓取,可以判断baiduspider、googlgebot等常用搜索引擎的蜘蛛抓取标记,需要的朋友参考下。

代码:
 

复制代码 代码示例:
//js 判断是否蜘蛛抓取
function checkIsZhizhu(){
  $flag = false;
  $tmp = $_SERVER['HTTP_USER_AGENT'];
  if(strpos($tmp, 'Googlebot') !== false){
     $flag = true;
  } else if(strpos($tmp, 'Baiduspider') >0){
     $flag = true;
  } else if(strpos($tmp, 'Yahoo! Slurp') !== false){
     $flag = true;
  } else if(strpos($tmp, 'msnbot') !== false){
     $flag = true;
  } else if(strpos($tmp, 'Sosospider') !== false){
     $flag = true;
  } else if(strpos($tmp, 'YodaoBot') !== false || strpos($tmp, 'OutfoxBot') !== false){
     $flag = true;
  } else if(strpos($tmp, 'Sogou web spider') !== false || strpos($tmp, 'Sogou Orion spider') !== false){
     $flag = true;
  } else if(strpos($tmp, 'fast-webcrawler') !== false){
     $flag = true;
  } else if(strpos($tmp, 'Gaisbot') !== false){
     $flag = true;
  } else if(strpos($tmp, 'ia_archiver') !== false){
     $flag = true;
  } else if(strpos($tmp, 'altavista') !== false){
     $flag = true;
  } else if(strpos($tmp, 'lycos_spider') !== false){
     $flag = true;
  } else if(strpos($tmp, 'Inktomi slurp') !== false){
     $flag = true;
  }
  return $flag;
}