AI 可见性检查器

它是一个测试诸如 ChatGPT、Claude、Perplexity 和 Google Gemini 等人工智能助手是否能够真正访问和抓取您的网站的工具。它会读取您的实时 robots.txt，检查每个 AI 用户代理，查找 llms.txt 和站点地图，并为您提供 0-100 的可见性分数以及特定的修复。

粘贴您的 URL 并单击“检查”。该工具会根据您的 robots.txt 规则评估这些引擎使用的确切抓取工具（ChatGPT-User 和 OAI-SearchBot for ChatGPT、PerplexityBot for Perplexity、ClaudeBot 和 Claude-User for Claude、Google-Extended for Gemini），并显示每个抓取工具的“允许”或“阻止”。

总共 13 个，分三组。搜索引擎：Googlebot、Bingbot。 AI训练爬虫：GPTBot、ClaudeBot、Google-Extended、CCBot、Bytespider、Applebot-Extended、meta-externalagent。 AI 答案引擎：ChatGPT-User、OAI-SearchBot、Claude-User、PerplexityBot。

这是一个透明的、确定性的汇总：爬虫访问最多可获得 80 分（robots.txt 允许的 13 个代理的份额），发布的 llms.txt 可获得 20 分，如果您的主页带有 noindex 指令，则会受到一点点惩罚。相同的站点总是产生相同的分数，没有任何东西是随机的。

通常的原因是 robots.txt 规则（“用户代理：*”下的“禁止：/”或指定的 AI 机器人）、元机器人标记或 X-Robots-Tag 标头中剩余的 noindex，或防火墙/CDN 规则。该检查器可以查明其中哪一个正在阻止每个爬网程序，以便您可以修复正确的爬网程序。

在 robots.txt 中允许您想要的 AI 爬虫（该工具为您提供了一个准备粘贴的代码片段），删除任何意外的 noindex，发布 sitemap.xml，并添加一个总结您网站的 llms.txt。您可以在此工具中生成有效的 llms.txt，然后重新检查以确认您的分数有所提高。

llms.txt 是位于域根目录下的 Markdown 文件，可为 AI 答案引擎提供网站的清晰摘要。是的，检查器会探测 llms.txt 和 llms-full.txt，如果您没有，它可以从您的站点地图生成有效的 llms.txt，以便您可以立即发布它。

这是一个战略选择。允许人工智能答案引擎和训练爬虫意味着您的内容可以在 ChatGPT、Perplexity、Gemini 和 AI Overviews 中出现和引用，这越来越多地发生发现。有些网站更喜欢阻止训练爬虫，同时允许答案引擎。该工具会同时显示两者，以便您可以慎重地做出决定。

不会。它会从您自己的实时 robots.txt、llms.txt 和页面标题测量爬虫访问和 AI 就绪信号，一切都是真实且可重现的。人工智能是否真正提及您的品牌还取决于您的内容，但助手无法抓取的网站根本无法被引用，这是该工具首先弥补的差距。

是的。它完全免费，无需注册，并且仅读取您网站的公共文件（robots.txt、llms.txt、站点地图）和主页，与任何爬虫看到的内容相同。您输入的任何内容都不会被存储。

在对 robots.txt 进行任何更改、站点迁移、CDN/防火墙更新或大型内容发布后运行它，并随着 AI 爬虫的发展定期运行。新的人工智能用户代理会定期出现，因此去年完全可见的网站今天可能会出现空白。