메뉴
Framework para evaluar la calidad de las respuestas de los agentes mediante el patron "LLM-as-a-Judge". Permite comparacion de respuestas y evaluacion contra rubricas.
Codex 또는 Claude로 설치 이 Prompt를 복사해 Codex, Claude 또는 다른 어시스턴트에 붙여 넣으면 Skill 페이지를 검토하고 설치를 진행할 수 있습니다.
SOC 직업 분류 기준
Estándares y validación para scripts Python cross-platform (Windows/Linux/macOS). Esta skill debe usarse cuando se escriban scripts Python en el framework para garantizar compatibilidad multi-SO, evitar problemas de encoding (emojis en Windows), y asegurar calidad consistente en todo el código.
Procesa archivos CSV para limpieza, transformación y análisis de datos tabulares. Esta skill debe usarse cuando el usuario necesite manipular datos CSV, incluyendo limpieza de datos, transformaciones (filtros, agregaciones, joins), conversión a otros formatos, o análisis exploratorio de datasets en formato CSV.
Genera visualizaciones de datos (gráficos de barras, líneas, etc.) usando Matplotlib y Seaborn.
Comprehensive document creation, editing, and analysis with support for tracked changes, formatting preservation, and text extraction. Use when working with Word documents (.docx).
Genera prompts JSON estructurados a partir de una idea inicial para IA, con objetivos y entregables claros.
Guía para escribir documentación Markdown de alta calidad siguiendo el principio MVI del framework FreakingJSON. Esta skill debe usarse cuando el usuario necesite crear o editar archivos .md en el framework, asegurando consistencia, claridad y adherencia al principio de Minimal Viable Information.
| id | context-evaluator |
| name | Context Evaluator |
| description | Framework para evaluar la calidad de las respuestas de los agentes mediante el patron "LLM-as-a-Judge". Permite comparacion de respuestas y evaluacion contra rubricas. |
| category | core |
| type | core |
| version | 1.0.0 |
| license | MIT |
| metadata | {"author":"FreakingJSON","source":"OBSOLETE/migration"} |
| compatibility | ["OpenCode","Claude","Gemini","Codex"] |
Esta skill implementa tecnicas avanzadas de evaluacion de agentes, permitiendo medir la precision, coherencia y adherencia a la filosofia del framework.
Cuando se requiere evaluar una respuesta, se deben seguir estos pasos:
rubrics/general.json: Evaluacion de proposito general.rubrics/technical.json: Enfoque en precision de codigo y arquitectura.rubrics/ux.json: Enfoque en claridad y tono para el usuario.scripts/evaluate.pyCLI para ejecutar evaluaciones desde la terminal o scripts de automatizacion.
python core/skills/core/context-evaluator/scripts/evaluate.py --prompt "..." --response "..." --rubric general