搜尋引擎與 AI 爬蟲工具箱
搜尋引擎與 AI 爬蟲工具箱:搜尋指令、爬蟲驗證、收錄與 AEO 健檢。台灣繁體中文 MCP 工具。
使うべきか
品質と安全性
検出事項(11)
- LOWbuild_search_urls 内
- LOWsearch_operators 内
- LOWtest_robots_txt 内
- LOWcheck_site_crawlers 内
- LOWai_crawler_list 内
- LOWverify_crawler_ip 内
- LOWserp_preview 内
- LOWyoutube_seo_check 内
- LOWindexnow_submit 内
- LOWsearch_submit_guide 内
ツール定義とプロトコルへの準拠に関する自動分析に基づいています。
コンテキストコスト
これは、サーバーのツールがモデルのコンテキストに読み込まれるたびに消費されるおおよそのトークン数です。数が多いほど、ほかのタスクに使える注意が減ります。
インストール
ワンクリックインストール
これを `claude_desktop_config.json` ファイルに追加してください:
{
"mcpServers": {
"seo": {
"url": "https://seo.penguindriver.com/mcp"
}
}
}リモートエンドポイント
https://seo.penguindriver.com/mcpstreamable-httpできること
ツール一覧
ツール(14)
🟢build_search_urls(q, exact, exclude, site, filetype, ...)
一次產生 Google、Bing、Yahoo 奇摩、百度、YouTube 的進階搜尋網址(關鍵字、完全符合、排除字、限定網站、檔案類型、時間)。
入力スキーマ
{
"type": "object",
"properties": {
"q": {
"type": "string"
},
"exact": {
"type": "string"
},
"exclude": {
"type": "string"
},
"site": {
"type": "string"
},
"filetype": {
"type": "string"
},
"time": {
"type": "string",
"enum": [
"day",
"week",
"month",
"year"
]
}
},
"required": [
"q"
]
}🟢search_operators(engine)
搜尋指令(site:、filetype:、intitle:、before: 等)在 Google、Bing、Yahoo、百度的支援對照與已失效指令。
入力スキーマ
{
"type": "object",
"properties": {
"engine": {
"type": "string",
"enum": [
"google",
"bing",
"yahoo",
"baidu"
]
}
}
}⚪generate_robots_txt(mode, disallow, sitemap)
產生 robots.txt:allow_all、block_training(封鎖 AI 訓練保留搜尋)、block_all_ai、block_all,可加不抓路徑與 Sitemap。
入力スキーマ
{
"type": "object",
"properties": {
"mode": {
"type": "string",
"enum": [
"allow_all",
"block_training",
"block_all_ai",
"block_all"
]
},
"disallow": {
"type": "string"
},
"sitemap": {
"type": "string"
}
}
}⚪test_robots_txt(robots, user_agent, path)
依 RFC 9309 測試某個 User-Agent 能否抓取某路徑。
入力スキーマ
{
"type": "object",
"properties": {
"robots": {
"type": "string"
},
"user_agent": {
"type": "string"
},
"path": {
"type": "string"
}
},
"required": [
"robots",
"user_agent"
]
}🟢check_site_crawlers(url)
檢查網站的 robots.txt、Sitemap、llms.txt,以及 Googlebot、bingbot、GPTBot、ClaudeBot、PerplexityBot 等是否被封鎖,附改善建議。
入力スキーマ
{
"type": "object",
"properties": {
"url": {
"type": "string"
}
},
"required": [
"url"
]
}🟢ai_crawler_list(type)
AI 與搜尋引擎爬蟲 User-Agent 名單:業者、用途、是否遵守 robots.txt、官方 IP 清單。
入力スキーマ
{
"type": "object",
"properties": {
"type": {
"type": "string",
"enum": [
"search",
"ai_search",
"train",
"user",
"optout"
]
}
}
}⚪verify_crawler_ip(ip, bot)
驗證 IP 是否真的來自 Googlebot、bingbot、GPTBot、ClaudeBot、PerplexityBot、Applebot、Baiduspider 等(官方 IP 清單+反查 DNS)。
入力スキーマ
{
"type": "object",
"properties": {
"ip": {
"type": "string"
},
"bot": {
"type": "string"
}
},
"required": [
"ip"
]
}⚪serp_preview(title, description, url)
預覽 Google 搜尋結果標題與描述,估算中文像素寬度與截斷位置。
入力スキーマ
{
"type": "object",
"properties": {
"title": {
"type": "string"
},
"description": {
"type": "string"
},
"url": {
"type": "string"
}
},
"required": [
"title"
]
}⚪generate_meta_tags(title, description, url, image, site_name, ...)
產生 title、description、canonical、Open Graph、Twitter 卡片與 JSON-LD。
入力スキーマ
{
"type": "object",
"properties": {
"title": {
"type": "string"
},
"description": {
"type": "string"
},
"url": {
"type": "string"
},
"image": {
"type": "string"
},
"site_name": {
"type": "string"
},
"type": {
"type": "string",
"enum": [
"website",
"article"
]
}
},
"required": [
"title"
]
}🟢youtube_seo_check(chapters, duration, title, description, tags)
檢查 YouTube 章節時間碼(0:00 起、至少 3 段、每段 10 秒)與標題、說明、標籤、主題標籤數量上限。
入力スキーマ
{
"type": "object",
"properties": {
"chapters": {
"type": "string"
},
"duration": {
"type": "string"
},
"title": {
"type": "string"
},
"description": {
"type": "string"
},
"tags": {
"type": "string"
}
}
}🟡indexnow_submit(host, key, urls, keyLocation)
用 IndexNow 通知 Bing、Yandex、Naver 等搜尋引擎網址已更新(需先在網站放金鑰檔,最多 100 個網址)。
入力スキーマ
{
"type": "object",
"properties": {
"host": {
"type": "string"
},
"key": {
"type": "string"
},
"urls": {
"type": "array",
"items": {
"type": "string"
}
},
"keyLocation": {
"type": "string"
}
},
"required": [
"host",
"key",
"urls"
]
}🟢search_engine_market_share
台灣與全球搜尋引擎市佔率(Google、Bing、Yahoo、百度等,StatCounter 最新月份)。
入力スキーマ
{
"type": "object",
"properties": {}
}🟡search_submit_guide
如何讓 Google、Bing、Yahoo、百度、YouTube、AI 搜尋收錄網站:工具、步驟與 API。
入力スキーマ
{
"type": "object",
"properties": {}
}⚪geo_citation_audit(url)
AEO/GEO 引用準備度健檢:檢查網頁能否被 ChatGPT、Perplexity、Google AI 摘要等答案引擎引用(爬蟲可讀、開頭直接回答、問句標題、表格、外部與權威來源、更新日期、JSON-LD citation、llms.txt、Markdown 版、Content-Digest),給分數與優先修正清單。
入力スキーマ
{
"type": "object",
"properties": {
"url": {
"type": "string"
}
},
"required": [
"url"
]
}コミュニティ
エビデンス