zoukankan      html  css  js  c++  java
  • 判断是否为蜘蛛抓取

     function checkIsZhizhu(){
            $flag = false;
            $tmp = $_SERVER['HTTP_USER_AGENT'];
            if(strpos($tmp, 'Googlebot') !== false){
                $flag = true;
            } else if(strpos($tmp, 'Baiduspider') >0){
                $flag = true;
            } else if(strpos($tmp, 'Yahoo! Slurp') !== false){
                $flag = true;
            } else if(strpos($tmp, 'msnbot') !== false){
                $flag = true;
            } else if(strpos($tmp, 'Sosospider') !== false){
                $flag = true;
            } else if(strpos($tmp, 'YodaoBot') !== false || strpos($tmp, 'OutfoxBot') !== false){
                $flag = true;
            } else if(strpos($tmp, 'Sogou web spider') !== false || strpos($tmp, 'Sogou Orion spider') !== false){
                $flag = true;
            } else if(strpos($tmp, 'fast-webcrawler') !== false){
                $flag = true;
            } else if(strpos($tmp, 'Gaisbot') !== false){
                $flag = true;
            } else if(strpos($tmp, 'ia_archiver') !== false){
                $flag = true;
            } else if(strpos($tmp, 'altavista') !== false){
                $flag = true;
            } else if(strpos($tmp, 'lycos_spider') !== false){
                $flag = true;
            } else if(strpos($tmp, 'Inktomi slurp') !== false){
                $flag = true;
            }
            return $flag;
        }

  • 相关阅读:
    Java 读取大容量excel
    Linux 安装mysql
    Linux 配置nginx
    java 微信H5支付
    微信公众号授权登录两种方式
    Jsoup 获取页面返回的table中的内容
    Python Model执行迁移数据库失败
    java上传txt文件,出现中文乱码
    在Window环境下,使用Django shell 命令查询数据库
    Java模拟form表单提交普通参数和文件
  • 原文地址:https://www.cnblogs.com/kwishly/p/3768399.html
Copyright © 2011-2022 走看看