php判断搜索引擎蜘蛛过来的就打开A页面，直接输入打开就访问B页面？

Question

如题尝试过用下面的代码有些页面 好像不太行！

<?php
function checkrobot($useragent=''){
    static $kw_spiders = array('bot', 'crawl', 'spider' ,'slurp', 'sohu-search', 'lycos', 'robozilla');
    static $kw_browsers = array('msie', 'netscape', 'opera', 'konqueror', 'mozilla');

    $useragent = strtolower(empty($useragent) ? $_SERVER['HTTP_USER_AGENT'] : $useragent);
    if(strpos($useragent, 'http://') === false && dstrpos($useragent, $kw_browsers)) return false;
    if(dstrpos($useragent, $kw_spiders)) return true;
    return false;
}
function dstrpos($string, $arr, $returnvalue = false) {
    if(empty($string)) return false;
    foreach((array)$arr as $v) {
        if(strpos($string, $v) !== false) {
            $return = $returnvalue ? $v : true;
            return $return;
        }
    }
    return false;
}

if(checkrobot()){
    include_once('index.php');
    
}else{
    include_once('502.html');
}
?>

有没有更新好，更简单的方法？

Answer 1

应该不是检查user-agent，而是检查referer。
referer可以判断是从什么网站跳转过来的。

Answer 2

其实判断来源IP就可以。每个搜索引擎爬虫都会告知都会使用那些IP进行爬取。

百度参考：https://ziyuan.baidu.com/coll...

谷歌参考：https://developers.google.com...