迪巴拉 发表于 前天 20:49

想实现SEO友好型CDN配置，百度Google爬虫配置直连源站，用户访...

百度/Google爬虫配置直连源站规则，用户还是访问节点缓存，不知可行不，怎么实现

TyCoding 发表于 前天 20:49

加规则 是 baidu google的 ua 就去源站

拾光 发表于 前天 20:50

主要是冒充百度和google的爬虫的特别多，经常把网站给爬崩溃了
现在流氓ai爬虫实在太多了
页: [1]
查看完整版本: 想实现SEO友好型CDN配置，百度Google爬虫配置直连源站，用户访...