ai-eval
Cloudflare Workers MCP server: ai-eval
Sollte ich dies verwenden
Qualität und Sicherheit
Befunde (2)
- LOWin score_response
- LOWin compare_responses
Basierend auf einer automatisierten Analyse der Tool-Definitionen und der Einhaltung des Protokolls.
Kontextkosten
Dies ist die ungefähre Anzahl der Tokens, die jedes Mal verbraucht werden, wenn die Tools des Servers in den Kontext eines Modells geladen werden. Höhere Werte verringern die Aufmerksamkeit, die für andere Aufgaben verfügbar ist.
Installieren
Installation mit einem Klick
Fügen Sie dies Ihrer Datei `claude_desktop_config.json` hinzu:
{
"mcpServers": {
"ai-eval": {
"url": "https://api.lazy-mac.com/ai-eval/mcp"
}
}
}Remote-Endpunkte
https://api.lazy-mac.com/ai-eval/mcpstreamable-httpWas es kann
Tool-Inventar
Tools (3)
⚪score_response(prompt, response, criteria)
Score an AI response against a prompt using heuristic metrics (length, relevance, structure, completeness)
Eingabe-Schema
{
"type": "object",
"properties": {
"prompt": {
"type": "string",
"description": "The original prompt/question"
},
"response": {
"type": "string",
"description": "The AI response to evaluate"
},
"criteria": {
"type": "array",
"items": {
"type": "string"
},
"description": "Optional keywords that should appear in response"
}
},
"required": [
"prompt",
"response"
]
}⚪compare_responses(prompt, responses)
Compare and rank multiple AI responses to the same prompt
Eingabe-Schema
{
"type": "object",
"properties": {
"prompt": {
"type": "string"
},
"responses": {
"type": "array",
"minItems": 2,
"items": {
"type": "string"
}
}
},
"required": [
"prompt",
"responses"
]
}🟢text_metrics(text)
Get text quality metrics: word count, sentence count, estimated tokens, readability grade
Eingabe-Schema
{
"type": "object",
"properties": {
"text": {
"type": "string"
}
},
"required": [
"text"
]
}Community
Nachweis