常见的搜索引擎UA标识判断是否是搜索引擎蜘蛛

以下是常见的搜索引擎蜘蛛的User Agent（UA）标识：

注意：无法通过UA判断是否是真正的搜索引擎蜘蛛，UA可以伪造，仅供参考。

Googlebot (Google 搜索桌面端)

Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

Googlebot-Smartphone(Google 搜索移动端)

Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

Baiduspider (百度搜索)

Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

Bingbot (必应搜索)

Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)

YandexBot (俄罗斯 Yandex 搜索)

Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)

Sogou web spider (搜狗搜索)

Mozilla/5.0 (compatible; Sogou web spider/4.0; +http://www.sogou.com/docs/help/webmasters.htm#07)

360Spider (360搜索/好搜)

Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0); 360

• > 常见的搜索引擎UA标识判断是否是搜索引擎蜘蛛 2026-4-3
• > 常见的免费网站流量统计系统申请地址 2026-2-27
• > 虚拟主机不支持运行 python 程序 2026-2-27
• > 百度搜索引擎网站更新和收录规律参考 2026-2-23
• > PHP5.6对比PHP8.0有哪些优势？建议升级 2026-2-13
• > 常见搜索引擎蜘蛛User-Agent（UA） 2026-2-9
• > GPTBot蜘蛛IP段收集 2026-2-7
• > 网站SSL证书（HTTPS）如果没有到期可能会吊销失效吗？ 2026-2-5
• > Mysql version can not be less than 4.1 2026-1-29
• > ThinkPHP 3.x / 5.x / 6.x 都可用的web.config伪静态规则 2026-1-27