PHP 蜘蛛判断，这个函数应该蛮 OK 的，不会有浏览器被误判吧

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

这是一个创建于 1496 天前的主题，其中的信息可能已经有所发展或是发生改变。

function is_bot()
{
    return isset($_SERVER['HTTP_USER_AGENT']) &&
               preg_match('/bot|crawl|slurp|spider|mediapartners/i',  $_SERVER['HTTP_USER_AGENT']);
}

4 条回复 • 2020-11-17 12:09:34 +08:00

maskerTUI

2020-11-17 12:03:38 +08:00

意义不大，ua 是可以伪造的，正常情况下爬虫都会伪装成浏览器。

loveuloveme

2020-11-17 12:05:44 +08:00

@maskerTUI 不会有浏览器被误判就行了，伪造的不用管

sadfQED2

2020-11-17 12:06:22 +08:00 via Android

意义不大+1

你这个只能拦住正规爬虫，拦正规爬虫可以直接写 robot.txt

westoy

2020-11-17 12:09:34 +08:00

看你打算干什么了

几大搜索引擎都会用非标识的 IP 段和 UA 检测网站，判断爬虫 UA 针对性吐数据 SEO 可能会被降权的