🏠首页 › 站长杂谈 › 怎么让别的网站的蜘蛛全部去另一个网站

婷姐 发表于 2024-8-27 21:46:23

怎么让别的网站的蜘蛛全部去另一个网站

我们自己的网站，有个一个内部管理系统，日志看了下，有很多蜘蛛去爬，想问一下，怎么让这些蜘蛛全部去另一个网站。

浅生 发表于 2024-8-27 21:46:31

301过去啊

婷姐 发表于 2024-8-27 21:47:08

302合适，301是杀鸡取卵

拾光 发表于 2024-8-27 21:48:01

内部管理系统不需要蜘蛛，请全部301走

Crystαl 发表于 2024-8-27 21:48:45

302合适，301是杀鸡取卵

IT618发布 发表于 2024-8-27 21:48:57

if ($http_user_agent ~* Baiduspider|bingbot|360Spider|Bytespider|Sogou web spider|Googlebot|YisouSpider|Baiduspider-render){
return 301 http://www.*****.com$request_uri;
}

这个代码有错误吗？放上去提示错误

拾光 发表于 2024-8-27 21:49:16

nginx version: nginx/1.22.0
nginx: invalid condition "$http_user_agent" in /www/server/panel/vhost/rewrite/****.cn.conf:1
nginx: configuration file /www/server/nginx/conf/nginx.conf test failed

查看完整版本: 怎么让别的网站的蜘蛛全部去另一个网站