180.163.28.114这个是什么IP
180.163这个IP段很奇怪,网站更新后,首页列表还没更新。他就能直接抓取更新的链接,而且网站后台也抓我分析不可能的采集的IP。因为首页列表没更新,新发布的链接,根本无法抓取,链接ID是没有规律的应该是有些搜索引擎基于浏览器的触发抓取,你新生成的页面,你浏览器打开后,他就通知蜘蛛来抓,后台也是的,你后台更新文章生成后台的链接,触发了浏览器,通知蜘蛛来抓取
因为服务器没有入侵了,我修改了后台后,还是抓后天,这个不可能有人知道后台的,肯定的浏览器触发的 说的也不是没可能 有没有可能是腾讯系的审核IP?我查了下这个IP段可能是腾讯系在使用,以前放过腾讯的关联站点 我用的是阿里云,腾讯审核应该不可能,可能是360或者搜狗浏览器等引起的,比如360浏览器触发了360蜘蛛,搜狗浏览器触发了搜狗蜘蛛,但又不是蜘蛛IP.
我分析了很久,感觉肯定是浏览器触发,不可能是采集IP、
好像几年前就发现了这个问题
页:
[1]