AI Bot 可见性报告

粘贴 Nginx combined 日志或 Cloudflare JSONL，查看哪些可识别 AI bot 真实出现在访问日志中。

导入日志文件

目标网站

高级：外部爬虫模拟器

生成带标记的请求，再由导入日志判断哪些尝试真正被观测到。

外部 AI 爬虫模拟器

对你输入的网站运行模拟器，再把生成的尝试请求与下方粘贴或导入的访问日志进行对比。

网站 URL

模拟抓取尝试

这些只是生成的请求尝试，不代表真实 AI 公司已经访问过该站点。

运行模拟器后会显示尝试请求。

导入日志中的观测结果

这里会标记当前粘贴日志中是否出现了对应的模拟请求。

运行模拟器后会显示尝试请求。

粘贴或导入访问日志

203.0.113.10 - - [08/Jul/2026:09:10:11 +0800] "GET /llms.txt HTTP/1.1" 200 342 "-" "GPTBot/1.0"
203.0.113.11 - - [08/Jul/2026:09:12:11 +0800] "GET /articles/open-geo-console HTTP/1.1" 200 912 "-" "OAI-SearchBot/1.0"
203.0.113.15 - - [08/Jul/2026:10:01:17 +0800] "GET /pricing HTTP/1.1" 404 231 "-" "ChatGPT-User/1.0"
203.0.113.12 - - [08/Jul/2026:09:14:11 +0800] "GET /about HTTP/1.1" 200 1204 "-" "Claude-SearchBot"
203.0.113.16 - - [09/Jul/2026:08:05:29 +0800] "GET /case-studies HTTP/1.1" 200 1888 "-" "Perplexity-User/1.0"
203.0.113.13 - - [09/Jul/2026:08:15:11 +0800] "GET / HTTP/1.1" 200 2232 "-" "Bytespider"
203.0.113.17 - - [09/Jul/2026:08:18:40 +0800] "GET /blog/geo-readiness HTTP/1.1" 301 0 "-" "CCBot/2.0 (https://commoncrawl.org/faq/)"
198.51.100.20 - - [09/Jul/2026:08:20:03 +0800] "GET /contact HTTP/1.1" 200 1780 "https://example.com/" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/126.0 Safari/537.36"
203.0.113.14 - - [10/Jul/2026:09:16:11 +0800] "GET /projects HTTP/1.1" 200 2032 "-" "PerplexityBot"
{"EdgeStartTimestamp":"2026-07-10T01:20:11Z","ClientRequestMethod":"GET","ClientRequestPath":"/sitemap.xml","EdgeResponseStatus":200,"ClientRequestUserAgent":"ClaudeBot"}
{"EdgeStartTimestamp":"2026-07-10T01:24:33Z","ClientRequestMethod":"GET","ClientRequestPath":"/robots.txt","EdgeResponseStatus":200,"ClientRequestUserAgent":"Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/18.0 Safari/605.1.15"}

概览

当前 registry 中有 19 条规则，其中 9 条从日志证据中被识别。

行数: 11
已解析: 11
AI 命中: 9
已识别 bot: 9
公司数: 5
规则数: 19

公司汇总

OpenAI

ChatGPT-User, GPTBot, OAI-SearchBot

3 次

2026年7月8日 02:01

Anthropic

Claude-SearchBot, ClaudeBot

2 次

2026年7月10日 01:20

Perplexity

Perplexity-User, PerplexityBot

2 次

2026年7月10日 01:16

ByteDance

Bytespider

1 次

2026年7月9日 00:15

Common Crawl

CCBot

1 次

2026年7月9日 00:18

已识别 bot

GPTBot

OpenAI · 训练

日志可识别

已识别

2026年7月8日 01:10

OAI-SearchBot

OpenAI · 搜索

日志可识别

已识别

2026年7月8日 01:12

ChatGPT-User

OpenAI · 助手抓取

日志可识别

已识别

2026年7月8日 02:01

ClaudeBot

Anthropic · 训练

日志可识别

已识别

2026年7月10日 01:20

Claude-SearchBot

Anthropic · 搜索

日志可识别

已识别

2026年7月8日 01:14

PerplexityBot

Perplexity · 搜索

日志可识别

已识别

2026年7月10日 01:16

Perplexity-User

Perplexity · 助手抓取

日志可识别

已识别

2026年7月9日 00:05

Bytespider

ByteDance · 训练

疑似 / 社区观察

已识别

2026年7月9日 00:15

CCBot

Common Crawl · 训练

日志可识别

已识别

2026年7月9日 00:18

AI Bot 覆盖矩阵

robots-token-only 条目是 robots.txt 的策略控制项，不代表爬虫已经访问过网站。

Claude-SearchBot

Anthropic · 搜索

日志可识别

已识别

2026年7月8日 01:14

ClaudeBot

Anthropic · 训练

日志可识别

已识别

2026年7月10日 01:20

Bytespider

ByteDance · 训练

疑似 / 社区观察

已识别

2026年7月9日 00:15

CCBot

Common Crawl · 训练

日志可识别

已识别

2026年7月9日 00:18

ChatGPT-User

OpenAI · 助手抓取

日志可识别

已识别

2026年7月8日 02:01

GPTBot

OpenAI · 训练

日志可识别

已识别

2026年7月8日 01:10

OAI-SearchBot

OpenAI · 搜索

日志可识别

已识别

2026年7月8日 01:12

Perplexity-User

Perplexity · 助手抓取

日志可识别

已识别

2026年7月9日 00:05

PerplexityBot

Perplexity · 搜索

日志可识别

已识别

2026年7月10日 01:16

Amazonbot

Amazon · 通用抓取

日志可识别

未出现

0 次

第 1 / 2 页

已识别路径证据

AnthropicClaude-SearchBot/about1

AnthropicClaudeBot/sitemap.xml1

ByteDanceBytespider/1

Common CrawlCCBot/blog/geo-readiness1

OpenAIGPTBot/llms.txt1

OpenAIOAI-SearchBot/articles/open-geo-console1

OpenAIChatGPT-User/pricing1

PerplexityPerplexity-User/case-studies1

PerplexityPerplexityBot/projects1

策略与证据说明

Google-Extended 通过 robots.txt token Google-Extended 控制；应展示为策略项，而不是流量证据。

Microsoft Copilot 标记为疑似或社区观察项。可以作为可见性信号，但对外报告前应先核验来源。

Bytespider 标记为疑似或社区观察项。可以作为可见性信号，但对外报告前应先核验来源。

Applebot-Extended 通过 robots.txt token Applebot-Extended 控制；应展示为策略项，而不是流量证据。