robots-txt-checker
Checks if a URL path is allowed by robots.txt. x402 payment required (testnet USDC).
我该使用它吗
质量与安全性
A
基于对工具定义和协议合规性的自动分析。
上下文开销
~162token 数（工具定义）
~1.5 KB典型响应大小
对注意力的影响极小（占 128k 上下文窗口的 0.13%）
这是每次将服务器的工具加载到模型上下文窗口时所消耗的大致 token 数。数值越高，可用于其他任务的注意力就越少。
安装
一键安装
将以下内容添加到你的 `claude_desktop_config.json` 文件中：
{
"mcpServers": {
"robots-txt-checker": {
"url": "https://faceted-napped-debtless.ngrok-free.dev/robots-txt-checker/mcp"
}
}
}远程端点
https://faceted-napped-debtless.ngrok-free.dev/robots-txt-checker/mcpstreamable-http它能做什么
工具清单
工具（1）
🟢 只读🟡 写入🔴 删除⚪ 未知
⚪robots_txt_checker(checks, payment)
Checks if a URL path is allowed by robots.txt. x402 payment required (Base mainnet USDC).
输入模式
{
"type": "object",
"properties": {
"checks": {
"type": "array",
"items": {
"type": "string"
},
"description": "JSON-encoded strings, each an object like {\"url\":...,\"path\":...,\"userAgent\":...}"
},
"payment": {
"type": "string",
"description": "x402 payment payload (base64 JSON), signed EIP-712 exact/transferWithAuthorization. Omit on the first call — the tool will return payment requirements (accepts[]) as an error result."
}
},
"required": [
"checks"
],
"additionalProperties": false,
"$schema": "http://json-schema.org/draft-07/schema#"
}社区
证据
最近观测
已验证未记录版本1 个工具