IT618发布
发表于 2024-11-14 21:51:26
Baiduspider-render是百度渲染抓取蜘蛛，就是模拟用户实际访问的界面，而不是单纯的只抓取html。
Crystαl
发表于 2024-11-14 21:52:10
那哪种是抓取蜘蛛呢？
婷姐
发表于 2024-11-14 21:52:35
这个render 渲染干嘛的
IT618发布
发表于 2024-11-14 21:53:08
都是，只要IP对就都是抓取蜘蛛。
拾光
发表于 2024-11-14 21:53:36
这种没显示地址，也不显示内页，算是抓取首页吗？
浅生
发表于 2024-11-14 21:54:29
半小时前又来了。
婷姐
发表于 2024-11-14 21:54:36
这个要自己看日志统计的设置了，按顺序对应看就知道了，又或者看看有没有记录URI，万一没有记录呢。
浅生
发表于 2024-11-14 21:55:08
有一些是待内页的有一些就是我截图这种，截图这种占三分之二，内页占三分之一
独家记忆
发表于 2024-11-14 21:55:55
你这是假的，真的是这样的--baiduzhizhu
独家记忆
发表于 2024-11-14 21:56:32
爬的是首页啊。这些IP是真的
