判断搜索引擎真假蜘蛛访问

主流搜索引擎蜘蛛抓取网站，都会自带UA特征，比如百度蜘蛛UA（Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)。

在网站的访问日志中也会相应记录，但UA是可以伪造的，目前越来越多伪造UA的扫描器或采集器都在伪造搜索引擎UA来迷惑管理员，造成无法判断是否是正规搜索引擎蜘蛛。

我们在不知道蜘蛛IP段的情况下，可以通过运行命令：nslookup 来判断真假蜘蛛。

首先以百度蜘蛛为例，在访问日志中找到带有UA记录的IP，如：220.181.108.*  在运行cmd命令输入 nslookup 220.181.108.* ，运行后结果中带有： baiduspider-220-181-108-*.crawl.baidu.com 字样，说明是真百度蜘蛛，反之如果没有则为假。

• > wordpress网站提升访问速度优化建议 2023-4-21
• > 如何判断网站正在被CC攻击？ 2022-12-19
• > 网站备案期间需要关闭网站吗？ 2022-12-7
• > 网站打开跳转到其他网站的原因 2022-11-26
• > https301跳转重定向到http的方法 2022-9-20
• > mysql批量删除数据库文章ID范围的方法 2022-7-4
• > 开启伪静态会提升网站打开速度吗？ 2022-4-27
• > 虚拟主机可以同时使用多个PHP版本吗？ 2022-4-27
• > Wordpress打开网页出现：建立数据库连接时出错 2022-3-4
• > wordpress后台登录忘记密码重置密码的方法 2021-12-2