Skip to main content

microsoft/benchmark-qed

SkillsMP hat 3 Skills aus microsoft/benchmark-qed gesammelt. Öffne einen Skill, um Quelle und Details zu prüfen.

Letzte erfasste Quellaktivität
SkillsMP-Katalog aktualisiert
gesammelte Skills
3
GitHub-Stars
93
GitHub-Forks
20

Skills in diesem Repository

2 Berufskategorien · 100% klassifiziert

Es werden 3 von 3 gesammelten Skills angezeigt.

Beruf
Softwareentwickler
Beschreibung

Initialize and configure benchmark-qed workspaces for RAG benchmarking. Use when: setting up a new benchmarking project, initializing config files for question generation or evaluation, downloading sample datasets, or modifying benchmark-qed settings.yaml…

Quellsprache: Englisch

Aktualisiert
Beruf
Datenwissenschaftler
Beschreibung

Evaluate RAG system outputs using benchmark-qed scoring methods. Use when: running pairwise comparisons, reference-based scoring, assertion-based evaluation (flat or hierarchical), retrieval metrics, or statistical significance tests on RAG outputs. Also use…

Quellsprache: Englisch

Aktualisiert
Beruf
Datenwissenschaftler
Beschreibung

Generate benchmark questions and assertions from input data using benchmark-qed. Use when: generating local, global, linked, or activity questions for RAG benchmarking, creating assertions for existing questions, computing assertion statistics, or running the…

Quellsprache: Englisch

Aktualisiert
Es werden 3 von 3 gesammelten Skills angezeigt.