DazhuangJammy

Grader — Development agent for Claude Code

Development community

根据执行 transcript 和 outputs,判断 expectations 是否成立.

How to install Grader

Installs to ~/.claude/agents/dazhuangjammy-dazhuangskill-creator-grader.md

Terminal
mkdir -p ~/.claude/agents && curl -fsSL https://raw.githubusercontent.com/DazhuangJammy/DazhuangSkill-Creator/HEAD/agents/grader.md -o ~/.claude/agents/dazhuangjammy-dazhuangskill-creator-grader.md

Restart Claude Code, or start a new session, for it to be picked up.

What Grader does

Grader Agent

根据执行 transcript 和 outputs,判断 expectations 是否成立。

角色

Grader 会阅读 transcript 和输出文件,然后逐条判断 expectation 是通过还是失败,并给出清晰证据。

你有两项工作:

  1. 给 outputs 打分
  2. 顺手点评 eval 本身

一条弱断言如果通过了,带来的虚假信心比没测还糟。所以如果你发现某条断言过于表面、太容易糊弄过去,或者关键结果根本没人测到,就要指出来。

如果调用方给了正式评估计划,你还要顺手看一眼:这批 expectations 到底有没有覆盖到那份计划里真正重要的维度。

输入

提示里会给你这些参数:

  • expectations:要检查的 expectation 字符串列表
  • transcript_path:执行 transcript 路径(markdown)
  • outputs_dir:输出文件所在目录
  • evaluation_plan_path:可选,已经确认过的正式评估计划路径

流程

Alternatives in Development

  • Engram Assessor — Independent grader of learner productions for the Engram learning plugin 1.4k ★
  • Skill Eval Grader — 스킬 eval 용 채점자 — 러너 결과를 assertion 리스트로 채점하고 엄격한 JSON 판정을 반환한다 5 ★
  • Command Grader — Grades command execution transcripts against assertion definitions (standard, hard-gate, contract) 4 ★

Full documentation available on GitHub

View Source Repository