AI Crawler Access Check
Can GPTBot, ClaudeBot and PerplexityBot reach a site? Real fetch per crawler, firewall/CDN blocks.
我該用這個嗎
品質與安全性
A
根據工具定義與協定合規性的自動化分析。
上下文成本
~200Token（工具定義）
~501 B典型回應大小
極小的注意力影響（128k 上下文的 0.16%）
這是每次將伺服器的工具載入模型上下文時所消耗的約略 token 數量。數量越高，可用於其他工作的注意力就越少。
安裝
一鍵安裝
將以下內容加入你的 `claude_desktop_config.json` 檔案：
{
"mcpServers": {
"ai-crawler-check": {
"url": "https://check.citant.ai/mcp?src=registry"
}
}
}遠端端點
https://check.citant.ai/mcp?src=registrystreamable-http它能做什麼
工具清單
工具（1）
🟢 唯讀🟡 寫入🔴 刪除⚪ 未知
🟢check_ai_crawler_access(url)
Checks whether AI crawlers (GPTBot, OAI-SearchBot, ChatGPT-User, ClaudeBot, PerplexityBot, Google-Extended and others) can actually reach a website. Goes beyond robots.txt: fetches the site as each crawler and detects firewall/CDN blocks (Cloudflare, Akamai, Imperva), challenge pages, noindex and llms.txt. Returns a 0-100 AI Access Score, a per-crawler verdict and the top issues with fixes. Takes 15-60 seconds.
輸入結構描述
{
"type": "object",
"properties": {
"url": {
"type": "string",
"description": "Website domain or URL, for example example.com"
}
},
"required": [
"url"
],
"additionalProperties": false
}社群
證據
近期觀測
已驗證未記錄版本1 個工具