Skip to main content

judge-evaluation

Use when changing or evaluating judge prompts, scoring thresholds, usage floors, or judgment eval corpora.

ソース情報

リポジトリ
kunchenguid/compact-adviser
ソースの最終更新活動
2026年9月20日 05:32
検出された SKILL.md の言語
英語
スター
204
フォーク
25

インストール方法

デフォルトでは、最初にソースを確認する Prompt が選択されています。直接コマンドに切り替えるか、ローカルコピーをダウンロードすることもできます。

ソースファイルを確認

インストールを決める前に、SKILL.md と SkillsMP に表示されている付属ファイルをお読みください。

SKILL.md を表示中

SKILL.md
ソースの指示 · 読み取り専用プレビュー
name
judge-evaluation
description
Use when changing or evaluating judge prompts, scoring thresholds, usage floors, or judgment eval corpora.
user-invocable
false
metadata
{"internal":true}
- Judge design rule, measured: two one-sentence atomic questions composed in code beat any single question that folds two judgments together (TypeSafe's own guidance). Hill-climb prompt changes with `eval/tools/earn.py` (paired bootstrap) and read the usage-floor ladder with `eval/tools/schedule.py`; a clause stays only if it earns its place. - Judgment eval harness: `packages/pi-extension/eval/`. Session transcripts, labels, worksheets, and results stay in gitignored `eval/local/`. See that README for the corpus contract and label rubric.
GitHubで見る