糖果VR分享网

标题: 防AI爬虫检测方案禁止爬虫检测 [打印本页]

作者: wsm123123 时间: 3 天前
标题: 防AI爬虫检测方案禁止爬虫检测
之前发过一篇禁止CC 以及AI爬虫的帖子，这算是补充

目前方案适配vps以及云主机等等，无任何终端操作。

如果发现站的cpu占用很多，按照以下排除

首先查看日志，下载到本地用not++打开或者在线搜索都可以。

搜索有没有以下
GPTBot
OAI-SearchBot

ClaudeBot
Claude-Web
Google-Extended
Meta-ExternalAgent
Bytespider
PerplexityBot
iaskspider
anthropic
CCBot
.ai后缀

然后禁止教程：

作者: jamesou 时间: 前天 09:40
膜拜神贴，后面的请保持队形~

欢迎光临糖果VR分享网 (https://www.tangguo2.com/)