哥斯拉 发表于 2024-9-11 17:43:31

分享个可疑的爬虫,useragent是百度蜘蛛

最近发现访客记录中有个可疑的爬虫 IP 61.146.178.35 中国 广东 梅州 丰顺 中国电信。useragent是百度蜘蛛Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)


rDNS查询为空。有个邻居是电信家宽:189.135.67.125.broad.gz.sc.dynamic.163data.com.cn.

这样基本判断为假冒百度蜘蛛。

再次查看解析记录。原来是爱站的(m.aizhan.com),应该是伪装成百度爬取首页seo内容用的。如果使用爱站,那么可以不用管。这个IP本身无害,也不会爬取采集其它内容。不用的话就屏蔽了把。

附爱站IP地址列表:
61.146.178.30
61.146.178.31
61.146.178.32
61.146.178.33
61.146.178.34
61.146.178.35
61.146.178.36
61.146.178.37
61.146.178.38

婷姐 发表于 2024-9-11 17:44:00

假蜘蛛一大堆!
页: [1]
查看完整版本: 分享个可疑的爬虫,useragent是百度蜘蛛

创宇盾启航版免费网站防御网站加速服务