浅生
发表于 2024-7-31 13:10:19
ip太多了 ，请求数量差不多一天30万次...封不过来的
主要是亚马逊的 AI爬虫，太可怕了
还好对方讲武德遵守robots协议，现在服务器他不来爬了
IT618发布
发表于 2024-7-31 13:10:34
亚马逊给服务器爬爆了，robots协议对方还是遵守的，现在不来爬了
Crystαl
发表于 2024-7-31 13:11:14
你的做国外站？
IT618发布
发表于 2024-7-31 13:12:07
繁体和简体。没流量
IT618发布
发表于 2024-7-31 13:12:31
好多垃圾爬虫在爬，屏蔽无用的~
