Paired-Twin Change Trials
Checkpoint-paired twin trials for agent fleet changes with blinded verdicts.
사용해야 할까요
품질 및 안전성
발견 사항 (1)
- LOWTool 'trial_unblind' description lacks action verbtrial_unblind에서
도구 정의와 프로토콜 준수에 대한 자동 분석을 기반으로 합니다.
컨텍스트 비용
이는 서버의 도구가 모델의 컨텍스트에 로드될 때마다 소비되는 대략적인 토큰 수입니다. 수치가 높을수록 다른 작업에 사용할 수 있는 주의가 줄어듭니다.
설치
원클릭 설치
`claude_desktop_config.json` 파일에 다음을 추가하세요:
{
"mcpServers": {
"paired-twin-change-trials-for-agents": {
"url": "https://textforagents.com/products/paired-twin-change-trials-for-agents/mcp"
}
}
}원격 엔드포인트
https://textforagents.com/products/paired-twin-change-trials-for-agents/mcpstreamable-http할 수 있는 일
도구 목록
도구 (7)
⚪trial_register_protocol(protocol, checkpoint, treated_config)
Register a hash-bound trial protocol; twins fork from the identical checkpoint, exactly one registered variable may differ.
입력 스키마
{
"type": "object",
"properties": {
"protocol": {
"type": "object"
},
"checkpoint": {
"type": "object"
},
"treated_config": {
"type": "object"
}
},
"required": [
"protocol",
"checkpoint",
"treated_config"
]
}⚪trial_fork_pair(trial_id, task)
Fork a checkpoint-paired assignment for one task (blinded arms A/B).
입력 스키마
{
"type": "object",
"properties": {
"trial_id": {
"type": "string"
},
"task": {
"type": "object"
}
},
"required": [
"trial_id",
"task"
]
}⚪trial_run_pair(trial_id, task)
Run one pair with the deterministic scripted agent and score blind. $0.25/pair, first 10 free once per operator.
입력 스키마
{
"type": "object",
"properties": {
"trial_id": {
"type": "string"
},
"task": {
"type": "object"
}
},
"required": [
"trial_id",
"task"
]
}🟡trial_submit_outputs(trial_id, task, control_output, treated_output)
Submit the operator twins' outputs for one pair; blinded deterministic scoring. $0.25/pair, first 10 free once per operator.
입력 스키마
{
"type": "object",
"properties": {
"trial_id": {
"type": "string"
},
"task": {
"type": "object"
},
"control_output": {},
"treated_output": {}
},
"required": [
"trial_id",
"task",
"control_output",
"treated_output"
]
}🟡trial_score(trial_id, task, control_output, treated_output)
Alias of trial_submit_outputs (blinded scoring).
입력 스키마
{
"type": "object",
"properties": {
"trial_id": {
"type": "string"
},
"task": {
"type": "object"
},
"control_output": {},
"treated_output": {}
},
"required": [
"trial_id",
"task",
"control_output",
"treated_output"
]
}⚪trial_verdict(trial_id)
Trial verdict under the enforced stopping rule.
입력 스키마
{
"type": "object",
"properties": {
"trial_id": {
"type": "string"
}
},
"required": [
"trial_id"
]
}⚪trial_unblind(trial_id)
Unblind after the verdict; hashed signed receipt covering every pair.
입력 스키마
{
"type": "object",
"properties": {
"trial_id": {
"type": "string"
}
},
"required": [
"trial_id"
]
}커뮤니티
증거