婷姐 发表于 2024-12-8 22:01:18

求助各位大屌：奇怪的百度蜘蛛

***内容可能违规暂时被隐藏***

TyCoding 发表于 2024-12-8 22:01:24

这么神奇的？ 看着是 百度蜘蛛

拾光 发表于 2024-12-8 22:02:10

这是渲染蜘蛛，大概率是页面存在指向性的资源文件导致的抓爬，例如页面来1个正常蜘蛛时，页面存在100个src都留html绝对地址后 差不多会来100个渲染蜘蛛抓爬这些src地址

浅生 发表于 2024-12-8 22:03:05

有种东西叫301
页: [1]
查看完整版本: 求助各位大屌：奇怪的百度蜘蛛

创宇盾启航版免费网站防御网站加速服务