zoukankan      html  css  js  c++  java
  • 判断是否为蜘蛛抓取

     function checkIsZhizhu(){
            $flag = false;
            $tmp = $_SERVER['HTTP_USER_AGENT'];
            if(strpos($tmp, 'Googlebot') !== false){
                $flag = true;
            } else if(strpos($tmp, 'Baiduspider') >0){
                $flag = true;
            } else if(strpos($tmp, 'Yahoo! Slurp') !== false){
                $flag = true;
            } else if(strpos($tmp, 'msnbot') !== false){
                $flag = true;
            } else if(strpos($tmp, 'Sosospider') !== false){
                $flag = true;
            } else if(strpos($tmp, 'YodaoBot') !== false || strpos($tmp, 'OutfoxBot') !== false){
                $flag = true;
            } else if(strpos($tmp, 'Sogou web spider') !== false || strpos($tmp, 'Sogou Orion spider') !== false){
                $flag = true;
            } else if(strpos($tmp, 'fast-webcrawler') !== false){
                $flag = true;
            } else if(strpos($tmp, 'Gaisbot') !== false){
                $flag = true;
            } else if(strpos($tmp, 'ia_archiver') !== false){
                $flag = true;
            } else if(strpos($tmp, 'altavista') !== false){
                $flag = true;
            } else if(strpos($tmp, 'lycos_spider') !== false){
                $flag = true;
            } else if(strpos($tmp, 'Inktomi slurp') !== false){
                $flag = true;
            }
            return $flag;
        }

  • 相关阅读:
    Django REST framework 1
    爬虫基本原理
    QueryDict对象
    Django组件ModelForm
    MongoDB
    Algorithm
    BOM
    CSS
    Vue
    AliPay
  • 原文地址:https://www.cnblogs.com/kwishly/p/3768399.html
Copyright © 2011-2022 走看看