左右不逢缘 发表于 2023-11-1 13:06:34

屏蔽国外垃圾无用蜘蛛,防止大量抓取导致网站崩溃浪费带宽 New

屏蔽国外垃圾无用蜘蛛,防止大量抓取导致网站崩溃浪费带宽

我参考这个帖子操作有些管用,分享给有这个方面的站长参考?
http://lieqiyi.com/forum.php?mod=viewthread&tid=1098&extra=page%3D1

我知道答案 回答被采纳将会获得1 贡献 已有1人回答

Crystαl 发表于 2023-11-1 13:07:05

robot.txt部分流氓蜘蛛不遵守,主要还是靠服务器端去设置屏蔽掉部分来源即可
页: [1]
查看完整版本: 屏蔽国外垃圾无用蜘蛛,防止大量抓取导致网站崩溃浪费带宽 New

创宇盾启航版免费网站防御网站加速服务