LLM 评审(LLM-as-a-Judge)不必为结论付费 — 决策模型

LLM 评审已从研究想法走进生产实践——但用生成模型当裁判,就得为一大段其实只需要结论的文字付输出 token 钱,再把文字解析回标签。决策模型把整个循环压没了:结论就是 API 响应本身——一个选项、一个分数、一个概率。

决策模型使用场景

  • 结论即结构化答案——零解析
  • 每次评审调用输出免费
  • 校准置信度驱动人工复核分流
  • A/B、评分规则与打分全覆盖

成对偏好(A/B)、通过与否的评分规则、1-10 打分——分别对应 choice、noul、score 三种原语。校准概率让你把边界样本转人工复核,而不是赌运气。

快速开始:三步调用 System One

HTTP 直调
curl https://api.easyjev.online/v1/systemone \
  -H "Authorization: Bearer sk-..." \
  -H "Content-Type: application/json" \
  -d '{
    "model": "typesafe/jev-latest",
    "state": {"user": {"plan": "pro"}},
    "questions": {
      "is_premium": {"type": "noul", "criteria": {"true": "…", "false": "…"}}
    }
  }'