Skip to main content

azamat1ch/difc-legal-rag

SkillsMP は azamat1ch/difc-legal-rag から 6 件の skill を収集しています。skill を開くとソースと詳細を確認できます。

記録された最新のソース活動
SkillsMP カタログ更新
収集済み skills
6
GitHub スター
1
GitHub フォーク
1

このリポジトリの skills

収集済み skill 6 件中 6 件を表示しています。

職業分類
ソフトウェア開発者
説明

Audit a gold manifest row end-to-end — verify answer correctness, grounding pages, and free-text quality. Reads from manifest, searches corpus independently, and updates the row in-place (review_status → audited or flagged). Use this skill for post-labeling…

原文の言語: 英語

更新
職業分類
ソフトウェア開発者
説明

Score a pipeline's free-text answer against the gold answer and gold pages on the 5 competition criteria (correctness, completeness, grounding, confidence calibration, clarity). Use this skill to evaluate answer quality for free_text questions before…

原文の言語: 英語

更新
職業分類
ソフトウェア開発者
説明

Label a deterministic legal RAG question (boolean, number, date, name, names) by independently searching the DIFC legal corpus and producing a gold manifest row with the correct answer and minimal grounding pages. Use this skill whenever you need to create or…

原文の言語: 英語

更新
職業分類
ソフトウェア開発者
説明

Label a free-text legal RAG question by searching the DIFC legal corpus and producing a gold manifest row with a grounded answer and minimal citation pages. Use this skill whenever you need to create gold labels for free_text questions — warm-up calibration,…

原文の言語: 英語

更新
職業分類
ソフトウェア開発者
説明

Score a free-text gold answer against the 5 LLM judge criteria (correctness, completeness, grounding, confidence calibration, clarity/relevance) and suggest improvements. Use this skill after labeling free-text questions to catch quality issues before they…

原文の言語: 英語

更新
職業分類
ソフトウェア品質保証アナリスト・テスター
説明

Audit grounding pages for a labeled gold manifest row. Uses adversarial methodology to find missing pages, unnecessary pages, and off-by-one errors. Works for both deterministic and free-text questions. Use this skill after labeling to verify that the cited…

原文の言語: 英語

更新
収集済み skill 6 件中 6 件を表示しています。