镖师
发表于 2024-10-18 12:13:00
奶奶的，我们网站被各种乱七八糟的爬虫抓爆了
各大AI模型疯狂爬取我们网站采集我们文章进行训练，日了狗，亚马逊爬虫半天爬了1万多次，网站99%访问都是乱七八糟的爬虫。
婷姐
发表于 2024-10-18 12:13:47
屏蔽UA、防护开启
拾光
发表于 2024-10-18 12:14:23
我把好多亚马逊的IP给禁了，天天不停的爬~
婷姐
发表于 2024-10-18 12:15:16
***内容可能违规暂时被隐藏***
婷姐
发表于 2024-10-18 12:15:58
用百度云防护拦截
Crystαl
发表于 2024-10-18 12:16:47
要升级配置了，不然会影响爬虫。
TyCoding
发表于 2024-10-18 12:17:06
啥网站看看下
IT618发布
发表于 2024-10-18 12:17:26
不知道国内会不会出cf那种防ai的防护
Crystαl
发表于 2024-10-18 12:17:51
关站，把内容转移到私域去
Crystαl
发表于 2024-10-18 12:18:37
新东方子站，靠的是品牌效应，看了你也抄不过来，省省心吧
页:
[1]
