Skip to main content

maragudk/evals-skills

SkillsMP は maragudk/evals-skills から 4 件の skill を収集しています。skill を開くとソースと詳細を確認できます。

記録された最新のソース活動
SkillsMP カタログ更新
収集済み skills
4
GitHub スター
12
GitHub フォーク
0

収集済み skill 4 件中 4 件を表示しています。

職業分類
ソフトウェア開発者
説明

Generate a custom trace annotation web app for open coding during LLM error analysis. Use when the user wants to review LLM traces, annotate failures with freeform comments, and do first-pass qualitative labeling (open coding). Also use when the user mentions…

原文の言語: 英語

更新
職業分類
データサイエンティスト
説明

Build a structured taxonomy of failure modes from open-coded trace annotations. Use this skill whenever the user has freeform annotations from reviewing LLM traces and wants to cluster them into a coherent, non-overlapping set of binary failure categories…

原文の言語: 英語

更新
職業分類
ソフトウェア開発者
説明

Use this skill when crafting, reviewing, or improving prompts for LLM pipelines — including task prompts, system prompts, and LLM-as-Judge prompts. Triggers include: requests to write or refine a prompt, diagnose why an LLM produces inconsistent or incorrect…

原文の言語: 英語

更新
職業分類
ソフトウェア品質保証アナリスト・テスター
説明

Build, validate, and deploy LLM-as-Judge evaluators for automated quality assessment of LLM pipeline outputs. Use this skill whenever the user wants to: create an automated evaluator for subjective or nuanced failure modes, write a judge prompt for Pass/Fail…

原文の言語: 英語

更新
収集済み skill 4 件中 4 件を表示しています。