镖师 发表于 2024-10-29 10:30:43

请教一个技术性的问题,关于屏蔽访客的,!但是搜索引擎抓取之后标题标变成

就是网站做了限制访问,就是访客访问不了。只对搜索引擎蜘蛛IP放行访问,

但是出现了一个情况就是,页面内容好不容易收录几个,但是标题变成了一串英文。

这是咋回事 谁懂啊?


voice on


在主页中嵌入了一个666.php ,如果是蜘蛛就正常继续访问下面内容,如果不是蜘蛛,就给他看404.php内容。

    ];

// 获取访客的IP地址,并转成数组
$iparr = explode('.', $_SERVER['REMOTE_ADDR']);
// 取前三个元素组合IP段,如 220.181.108
$spiderid = $iparr . '.' . $iparr;
if (in_array($spiderid, $arr)) {
    echo '<div style="display:none;">123456!</div>';
} else {
    // 如果不是爬虫蜘蛛,而是访客的话则跳转到404页面
    $url = '404.php'; // 根目录随便的文件(可以自定义php或者静态文件)
    $html= file_get_contents($url);
    echo $html;//输出展示内容给非蜘蛛看
    exit();
}
?>

浅生 发表于 2024-10-29 10:31:17

谢谢金币

拾光 发表于 2024-10-29 10:31:39

谢谢金币,别搞旁门左道

Crystαl 发表于 2024-10-29 10:32:37

旁锤子啊,单纯不想让一些***复制采集内容而已

IT618发布 发表于 2024-10-29 10:33:23

谢谢金币

浅生 发表于 2024-10-29 10:33:48

就你发的这个代码来看的话!蜘蛛访问显示的是<div style="display:none;">123456!</div>当然后面可能会显示正常内容! 但蜘蛛的代码中,第一行肯定是<div style="display:none;">123456!</div>!
非蜘蛛访问显示的是404.php!
而不是你说的蜘蛛访问显示内容正常!

另外提醒你一句!有些蜘蛛IP是隐藏的!!你通过nslookup查询 ,,显示他不是百度蜘蛛!!!
但是他真的是百度蜘蛛!不过这种很少!

浅生 发表于 2024-10-29 10:33:59

谢谢金币

拾光 发表于 2024-10-29 10:34:38

代码可能有问题

婷姐 发表于 2024-10-29 10:35:28

是不是要新增BA?前端时间我也这样搞,不过是用的nginx修改配置,根据ua返回不同内容,但是本不该给蜘蛛看到的东西还是被收录了。所以我认为做这些很可能是没用的。

IT618发布 发表于 2024-10-29 10:35:46

不建议这种方式,这在搜索引擎看来是违规操作。游客和搜索引擎必须要看到一样的内容才行,很多搜索引擎会用你不知道的IP+没有任何标识的UA来进行检测
页: [1] 2
查看完整版本: 请教一个技术性的问题,关于屏蔽访客的,!但是搜索引擎抓取之后标题标变成

创宇盾启航版免费网站防御网站加速服务