小编前言

我们很多时候都会遇到伪造搜索引擎爬虫的UA,但是很多时候又无法判断他的真实性。 以下代码,为检验部分搜索引擎真实性的案例,如有更多方法,请回复评论。 因为英语不太好,所以下面的内容就 ...

我们很多时候都会遇到伪造搜索引擎爬虫的UA,但是很多时候又无法判断他的真实性。

以下代码,为检验部分搜索引擎真实性的案例,如有更多方法,请回复评论。

因为英语不太好,所以下面的内容就有部分中文了。

  1. <?php
  2. if(getspider()){
  3.         exit('假的搜索引擎!');
  4. }
  5. function getspider(){
  6.         $访问UA = strtolower($_SERVER['HTTP_USER_AGENT']);
  7.           $访问IP = isset($_SERVER['REMOTE_ADDR']) ? $_SERVER['REMOTE_ADDR'] : '';
  8.           if(isset($_SERVER['HTTP_X_FORWARDED_FOR'])){
  9.                   $list = explode(',', $_SERVER['HTTP_X_FORWARDED_FOR']);
  10.                   $访问IP = $list[0];
  11.           }
  12.           if (!ip2long($访问IP)) $访问IP = '未知IP';
  13.         $访问主机 = str_replace('.', '-', $访问IP);
  14.         if (strpos($访问UA, 'googlebot') !== false){
  15.                 $解析主机 = gethostbyaddr($_SERVER['REMOTE_ADDR']);
  16.                 if ($解析主机 != 'crawl-'.$访问主机.'.googlebot.com') return 'googlebot?';
  17.         }

  18.         if (strpos($访问UA, 'sogou') !== false){
  19.                 $解析主机 = gethostbyaddr($_SERVER['REMOTE_ADDR']);
  20.                 if ($解析主机 != 'sogouspider-'.$访问主机.'.crawl.sogou.com') return 'sogou';
  21.         }
  22.         if (strpos($useragent, 'bing') !== false){
  23.                 $解析主机 = gethostbyaddr($_SERVER['REMOTE_ADDR']);
  24.                 if ($解析主机 != 'msnbot-'.$访问主机.'.search.msn.com') return 'bing';
  25.         }
  26.         if (strpos($访问UA, 'baiduspider') !== false){
  27.                 $解析主机 = gethostbyaddr($_SERVER['REMOTE_ADDR']);
  28.                 if ($解析主机 != 'baiduspider-'.$访问主机.'.crawl.baidu.com') return 'baiduspider?';
  29.         }
  30.         return false;
  31. }
复制代码
回复

使用道具 举报

    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    Powered by Discuz! X3.4  © 2001-2013 Comsenz Inc.