원클릭으로 Manus에서 모든 스킬 실행

eval-gate-policy

스타7

포크0

업데이트2026년 5월 27일 00:22

§35 Eval-Driven Development 强制规则（铁律 #12）。当 Claude 编辑 .claude/commands/、 .claude/agents/、.claude/skills/、.agents/skills/、CLAUDE.md、playbook/handbook.md、 .claude/output-styles/ 等 prompt/agent 配置类文件时自动加载。强制：无 eval 不进 main。配套 eval-gate.sh 注入 PostToolUse 提醒。

설치

Codex 또는 Claude로 설치 이 Prompt를 복사해 Codex, Claude 또는 다른 어시스턴트에 붙여 넣으면 Skill 페이지를 검토하고 설치를 진행할 수 있습니다.

Manus에서 실행

출처

cantascendia

cantascendia/yakuten

GitHub 저장소 열기 Creator 저장소 보기

다운로드

Manus에서 실행

Eval Gate 策略 (§35 / 铁律 #12)

你正在改 prompt 类文件（commands / agents / skills / CLAUDE.md / handbook）。这些是 ai-playbook 的"软件"— 改了它们，AI 行为就变。无 eval 验证就 ship 等于 vibe shipping。

强制门禁

合并到 main 前必须满足：

✅ evals/golden-trajectories/ 中存在覆盖本改动的 yaml case
✅ /cto-eval run 通过
✅ regression 集（既有 case）也通过（无回归）

你应如何响应

改 commands/agents/skills 后

立即检查（用 Bash）：

# 看是否已有覆盖此改动的 eval
ls evals/golden-trajectories/ | grep -i "<相关关键词>"

有覆盖 → 跑 /cto-eval run 验证不回归 无覆盖 → 必须先 /cto-eval add <描述> 创建 yaml case，再跑

改 CLAUDE.md / handbook

更广义影响。检查：

是否引入新铁律 / 新流程 / 新 agent 行为
如果是 → 至少 1 条新 eval 覆盖新行为
如果只是 typo / 注释 / 格式 → 可 export CTO_EVAL_GATE_ACK=1 跳过

Eval yaml 必填字段

id: NNN-<short-name>
description: <一句话说明这条 eval 验证什么>
input: |
  <模拟的用户输入或场景>
expected_steps:
  - <CTO 应该执行的步骤 1>
  - <步骤 2>
forbidden_actions:
  - <不该做什么 1>
  - <不该做什么 2>
acceptance_criteria:
  - <可量化验收标准 1>
  - <验收 2>
priority: P0|P1|P2

当 hook eval-gate.sh 注入提醒时

不要无视
在响应里 ack：
"刚改了 [commands/agents/skill X]，按铁律 #12 我会：
- 检查 evals/golden-trajectories/ 是否有 covering case
- 无覆盖则先 /cto-eval add
- commit 前 /cto-eval run"
实际去做（不要只是嘴上说）

例外（必须明示）

改动类型	是否需要 eval
typo 修复	❌ 不需要，但 commit msg 标 `chore:` 或 `docs:`
注释调整	❌
格式化（不改语义）	❌
章节顺序调整	❌
新功能/新 hook/新 agent 行为	✅ 必须
改 hook 阈值 / 改 keyword 列表	✅ 必须
删 command/agent	✅ 必须验证依赖未破

跳过时显式说明：

export CTO_EVAL_GATE_ACK=1   # 本会话 prompt 改动是 typo/格式调整，无行为变化

反模式

反模式	识别
改完 prompt 直接 commit	没跑 /cto-eval run
Eval 仅有 happy path	forbidden_actions 为空
Eval 验收标准不可量化	"should be good" 而不是具体断言
删 eval 让其通过	等同于改测试让其通过（铁律 #14）

引用

handbook §35 全文（Eval-Driven Development）
CLAUDE.md 铁律 #12
.claude/hooks/eval-gate.sh（注入提醒层）
.claude/rules/eval-gate.md（详细规则）
evals/golden-trajectories/（现有 case 集）

이 저장소의 다른 Skills

같은 저장소

seo-ops

cantascendia/yakuten

yakuten (hrtyaku.com) 网站运营/SEO 作战入口。当用户要求：分析 GA/GSC 数据、看流量/排名/搜索词、出 SEO 报告、推荐 SEO 文章选题、优化 CTR/meta/AEO、内容更新计划、"网站运营" 等任务时触发。分析由 Claude 本人完成（不调 Gemini；scripts/seo/ai-analyze.mjs 仅为 CI 无人值守备用）。

2026-07-107

constitution-loader

cantascendia/yakuten

§37 Constitution 协议自动加载器（对齐 GitHub Spec Kit）。当用户请求涉及 spec/plan/ feature/architecture/decision/release 或开始新任务时自动触发。读取项目 docs/ai-cto/CONSTITUTION.md 并把项目特定的不可妥协约束注入响应。

2026-05-277

forbidden-policy

cantascendia/yakuten

§32.1 Forbidden 路径强制规则。当 Claude 编辑 auth/payment/billing/secrets/keys/migration/ crypto/infra/terraform/ansible/.github/workflows 路径下文件时自动加载。要求 spec-driven、双签、PR 标签 requires-double-review。配套 .claude/hooks/forbidden-guard.sh 硬阻止 (exit 2)；本 skill 提供 Claude 应如何响应被阻止时的处理流程。

2026-05-277

handbook-search

cantascendia/yakuten

ai-playbook handbook (3986 行) 智能查询入口。当用户/任务提到 §NN.M 章节号、 "手册"、"playbook"、"铁律 #N"、"反模式"、"竞品" 等关键词时自动触发。读 INDEX.md 决定该读哪段 handbook，避免每次塞 3986 行全文进上下文。

2026-05-277

learned-rules-loader

cantascendia/yakuten

v3.9 Bugbot-style learned rules 自动加载器（Cursor 启发，44k learned rules 验证）。当 Claude 触及 .claude/rules/learned/ 目录或被 /cto-evolve apply 写入新 learned rule 时自动加载。把项目历次自审 / cross-review / commit 沉淀的具体教训注入上下文，避免重复犯同类错。

2026-05-277

test-lock-rules

cantascendia/yakuten

§20.3 Test-Lock 规则（铁律 #14）。当 Claude 编辑测试文件 (tests/、__tests__/、 *.test.{ts,tsx,js,jsx,py}、*.spec.*、*_test.{py,go}) 时自动加载。强制： AI 只能改实现不能改断言；改测试需符合合法场景之一并显式标注 commit message。配套 .claude/hooks/test-lock-guard.sh 注入 PreToolUse 提醒。

2026-05-277

name	eval-gate-policy
description	§35 Eval-Driven Development 强制规则（铁律 #12）。当 Claude 编辑 .claude/commands/、 .claude/agents/、.claude/skills/、.agents/skills/、CLAUDE.md、playbook/handbook.md、 .claude/output-styles/ 等 prompt/agent 配置类文件时自动加载。强制：无 eval 不进 main。配套 eval-gate.sh 注入 PostToolUse 提醒。
user-invocable	false
paths	["/.claude/commands/","/.claude/agents/","/.claude/skills/","/.agents/skills/","/CLAUDE.md","/playbook/handbook.md","/.claude/output-styles/"]

Eval Gate 策略 (§35 / 铁律 #12)

强制门禁

合并到 main 前必须满足：

✅ evals/golden-trajectories/ 中存在覆盖本改动的 yaml case
✅ /cto-eval run 通过
✅ regression 集（既有 case）也通过（无回归）

你应如何响应

改 commands/agents/skills 后

立即检查（用 Bash）：

# 看是否已有覆盖此改动的 eval
ls evals/golden-trajectories/ | grep -i "<相关关键词>"

有覆盖 → 跑 /cto-eval run 验证不回归 无覆盖 → 必须先 /cto-eval add <描述> 创建 yaml case，再跑

改 CLAUDE.md / handbook

更广义影响。检查：

是否引入新铁律 / 新流程 / 新 agent 行为
如果是 → 至少 1 条新 eval 覆盖新行为
如果只是 typo / 注释 / 格式 → 可 export CTO_EVAL_GATE_ACK=1 跳过

Eval yaml 必填字段

id: NNN-<short-name>
description: <一句话说明这条 eval 验证什么>
input: |
  <模拟的用户输入或场景>
expected_steps:
  - <CTO 应该执行的步骤 1>
  - <步骤 2>
forbidden_actions:
  - <不该做什么 1>
  - <不该做什么 2>
acceptance_criteria:
  - <可量化验收标准 1>
  - <验收 2>
priority: P0|P1|P2

当 hook eval-gate.sh 注入提醒时

不要无视
在响应里 ack：
"刚改了 [commands/agents/skill X]，按铁律 #12 我会：
- 检查 evals/golden-trajectories/ 是否有 covering case
- 无覆盖则先 /cto-eval add
- commit 前 /cto-eval run"
实际去做（不要只是嘴上说）

例外（必须明示）

改动类型	是否需要 eval
typo 修复	❌ 不需要，但 commit msg 标 `chore:` 或 `docs:`
注释调整	❌
格式化（不改语义）	❌
章节顺序调整	❌
新功能/新 hook/新 agent 行为	✅ 必须
改 hook 阈值 / 改 keyword 列表	✅ 必须
删 command/agent	✅ 必须验证依赖未破

跳过时显式说明：

export CTO_EVAL_GATE_ACK=1   # 本会话 prompt 改动是 typo/格式调整，无行为变化

反模式

反模式	识别
改完 prompt 直接 commit	没跑 /cto-eval run
Eval 仅有 happy path	forbidden_actions 为空
Eval 验收标准不可量化	"should be good" 而不是具体断言
删 eval 让其通过	等同于改测试让其通过（铁律 #14）

引用

handbook §35 全文（Eval-Driven Development）
CLAUDE.md 铁律 #12
.claude/hooks/eval-gate.sh（注入提醒层）
.claude/rules/eval-gate.md（详细规则）
evals/golden-trajectories/（现有 case 集）