ai-eval

Cloudflare Workers MCP server: ai-eval

使うべきか

品質と安全性

B
説明の品質
80%
スキーマの完全性
87%
命名の品質
80%
ポイズニングのリスク
100%
権限の一致
100%
プロトコルへの準拠
100%

検出事項(2)

  • LOWTool 'score_response' description lacks action verbscore_response 内
  • LOWTool 'compare_responses' description lacks action verbcompare_responses 内

ツール定義とプロトコルへの準拠に関する自動分析に基づいています。

コンテキストコスト

~214トークン数(ツール定義)
~567 B一般的なレスポンスサイズ
注意への影響は最小限(128k コンテキストの 0.17%)

これは、サーバーのツールがモデルのコンテキストに読み込まれるたびに消費されるおおよそのトークン数です。数が多いほど、ほかのタスクに使える注意が減ります。

インストール

ワンクリックインストール

これを `claude_desktop_config.json` ファイルに追加してください:

{
  "mcpServers": {
    "ai-eval": {
      "url": "https://api.lazy-mac.com/ai-eval/mcp"
    }
  }
}

リモートエンドポイント

https://api.lazy-mac.com/ai-eval/mcpstreamable-http

できること

ツール一覧

ツール(3)

🟢 読み取り専用🟡 書き込み🔴 削除⚪ 不明
⚪score_response(prompt, response, criteria)

Score an AI response against a prompt using heuristic metrics (length, relevance, structure, completeness)

入力スキーマ

{
  "type": "object",
  "properties": {
    "prompt": {
      "type": "string",
      "description": "The original prompt/question"
    },
    "response": {
      "type": "string",
      "description": "The AI response to evaluate"
    },
    "criteria": {
      "type": "array",
      "items": {
        "type": "string"
      },
      "description": "Optional keywords that should appear in response"
    }
  },
  "required": [
    "prompt",
    "response"
  ]
}
⚪compare_responses(prompt, responses)

Compare and rank multiple AI responses to the same prompt

入力スキーマ

{
  "type": "object",
  "properties": {
    "prompt": {
      "type": "string"
    },
    "responses": {
      "type": "array",
      "minItems": 2,
      "items": {
        "type": "string"
      }
    }
  },
  "required": [
    "prompt",
    "responses"
  ]
}
🟢text_metrics(text)

Get text quality metrics: word count, sentence count, estimated tokens, readability grade

入力スキーマ

{
  "type": "object",
  "properties": {
    "text": {
      "type": "string"
    }
  },
  "required": [
    "text"
  ]
}

コミュニティ

このサーバーを評価する

エビデンス

最近の観測

検証済みバージョンは記録されていませんツール 3 件
検証済みバージョンは記録されていませんツール 3 件