工具 / AI 爬虫日志分析工具

AI 爬虫日志分析工具

上传您的服务器日志:哪些 AI 机器人访问过您的网站、跳过了哪些页面,以及有多少请求返回了错误。

本页涉及的 AI 引擎

分析在服务器端执行,粘贴的日志不会被保存,也不会向任何第三方发送数据。

您今天还剩 1 次免费检测。免费检测仅列出发现的问题,不包含修复方案。
今天还剩 3 次免费检测

创建免费账户即可开始分析。每天 3 次分析,无需银行卡。 创建我的免费账户

这些评分衡量网站的技术与内容准备度,并不代表 AI 回答中实际出现的引用次数。 方法论

本工具的检测项目

  • 追踪 18 个爬虫:GPTBot、OAI-SearchBot、OAI-AdsBot、ChatGPT-User、ClaudeBot、PerplexityBot、Google-Extended、Bingbot、Applebot-Extended、Meta-ExternalAgent 等
  • 区分训练型爬虫、检索型爬虫,以及由真人触发的浏览
  • 返回给爬虫的错误率:对 OAI-SearchBot 返回 403,会让全部内容工作前功尽弃
  • 按厂商细分(OpenAI、Anthropic、Google、Perplexity、Microsoft 等)
  • 被抓取最多的页面,以及该日志覆盖的时间范围
  • 覆盖率评分:真正重要的引擎是否确实来访