SEO 工具

AI Markdown 检查器

测试 Cloudflare Markdown 代理与 AI SEO

分析 AI 爬虫如何与您的网站互动。检查代理的 Markdown 支持、AI 元标签(noai/noimageai)、AI 机器人的 robots.txt 规则、内容信号头和令牌使用情况。

完整的 AI 审计

测试 Cloudflare Markdown 代理、元标签、robots.txt 规则、内容信号头和令牌使用情况 — 所有内容在一次扫描中完成。

所有主要 AI 机器人

针对 GPTBot、ChatGPT-User、ClaudeBot、Google-Extended、PerplexityBot、CCBot、Bytespider、Amazonbot 等进行测试。

100% 免费和私密

无需注册。我们从不存储您的 URL 或结果。可以检查任意数量的网站。

理解 Cloudflare Markdown 代理与 AI SEO

随着 ChatGPT、Claude、Gemini 和 Perplexity 等 AI 系统越来越多地爬取网络,出现了一个新挑战:如何有效地向 AI 代理提供内容,同时保持对内容使用方式的控制。Cloudflare 的 Markdown 代理处于这一演变的前沿。

什么是代理的 Markdown?

代理的 Markdown 是 Cloudflare 在其 AI 审计套件中引入的一项功能(于 2026 年初全面推出)。当 AI 机器人请求带有 Accept: text/markdown 头的页面时,Cloudflare 会自动将繁重的 HTML 转换为干净、紧凑的 Markdown。这将令牌使用量减少最多 90%,为 AI 开发者节省了显著成本,同时为 AI 处理提供了更清晰的内容。转换在 Cloudflare 的边缘网络上实时进行,无需对您网站的代码进行任何更改。

该检查器如何工作?

我们的工具对您网站的 AI 兼容性进行全面分析。它发送带有 Accept: text/markdown 头的请求,以测试 Cloudflare 的 Markdown 代理支持。它解析您的 HTML 以查找特定于 AI 的元指令,如 'noai' 和 'noimageai'。它获取您的 robots.txt 以检查 AI 机器人用户代理(如 GPTBot、ClaudeBot 和 Google-Extended)的规则。它还检查响应头中的内容信号指令和报告估计令牌使用情况的 x-markdown-tokens 头。

为什么检查您的 AI Markdown 兼容性?

  • 减少 AI 机器人带宽 — Markdown 响应使用的令牌比 HTML 少多达 90%
  • 验证您的 AI 内容政策 — 确保 noai/noimageai 元标签正确实施
  • 检查内容信号头 — 查看您的网站是否传达训练权限(ai-train=yes/no)
  • 审计 AI 机器人访问 — 确认哪些 AI 爬虫可以通过 robots.txt 规则访问您的内容
  • 优化缓存 — 验证 Vary: Accept 头确保 Markdown 与 HTML 版本的正确缓存

隐私优先

我们只获取您输入的 URL 以执行检查。没有数据被存储,没有设置 cookies,也没有跟踪发生。您的结果是实时生成的,永远不会被保存。

常见问题

什么是 Cloudflare Markdown 代理?
Cloudflare Markdown 代理是一项功能,当 AI 机器人请求带有 Accept: text/markdown 头的内容时,自动将 HTML 页面转换为紧凑的 Markdown。这将令牌使用量减少最多 90%,并为 AI 处理提供更清晰的内容。使用 Cloudflare 的网站可以通过在其仪表板的 AI 审计部分中进行一次切换来启用此功能。
什么是内容信号头?
内容信号头是 Cloudflare 引入的 HTTP 响应头,用于传达 AI 机器人可以对您的内容执行的操作。例如,'Content-Signal: ai-train=yes' 明确允许 AI 训练,而 'ai-train=no' 则禁止它。这些头提供了一种机器可读的方式来表达超出 robots.txt 提供的内容使用政策。
'noai' 和 'noimageai' 元标签有什么作用?
'noai' 元标签告诉 AI 爬虫您的内容不应被用于训练 AI 模型。'noimageai' 标签特别防止图像被用于 AI 训练。这些标签放置在您的 HTML 头部分,如:<meta name='robots' content='noai, noimageai'>。这些标签是主要 AI 公司支持的新兴标准。
什么是 x-markdown-tokens 头?
当 Cloudflare 提供页面的 Markdown 版本时,它可以包含 x-markdown-tokens 头,报告页面内容包含的估计令牌数量。这有助于 AI 开发者理解带宽和成本的影响。一个典型的网页在 HTML 中可能使用 5,000-20,000 个令牌,但在 Markdown 中仅使用 500-2,000 个令牌。
该工具检查哪些 AI 机器人?
我们检查所有主要的 AI 爬虫:GPTBot 和 ChatGPT-User(OpenAI)、Google-Extended(Gemini)、ClaudeBot(Anthropic)、CCBot(Common Crawl)、PerplexityBot、Amazonbot、Bytespider(字节跳动)、FacebookBot(Meta)和 Applebot-Extended(苹果智能)。
为什么 Vary: Accept 头重要?
Vary: Accept 头告诉缓存(CDN、代理、浏览器)响应是基于 Accept 头而变化的。如果没有它,缓存的 Markdown 版本可能会被提供给常规浏览器,反之亦然。启用代理的 Markdown 时,Cloudflare 会自动设置此头,确保正确的内容协商。