Agent skill quality checker. Input a skill directory or skill files; output trigger clarity, metadata issues, examples, safety boundaries, installability, po...
文档
Skill Quality Scorer
试用Deterministic TRACE+ quality scorer for Agent Skills (SKILL.md): six dimensions T-R-F-S-I-E, 30 sub-items, merges TRACE, good-skill authoring reverse-rubric...
它能做什么
Deterministic TRACE+ quality scorer for Agent Skills (SKILL.md): six dimensions T-R-F-S-I-E, 30 sub-items, merges TRACE, good-skill authoring reverse-rubric (Extra08/skill-creator), and ClawHub meta-skills (skill-reviewer, skill-quality-audit). Use when scoring, rating, auditing, or comparing skills; or says「给技能打分」「技能评分」「和同类 skill 差在哪」「是否符合规范」. Runs static_audit.py first; outputs JSON + Markdown. Not TRACE-only.
技能文档
Skill Quality Scorer · 技能质量评分器
EN TRACE+ (T-R-F-S-I-E) × 30 sub-items · static script first · formula score · JSON + Markdown.
中文 TRACE+ 六维 30 子项 · 先 static_audit · 公式算分 · JSON + Markdown。
When / 何时用: 迭代没方向 · 对标同类 · 发布前自检 · 批量评 skills/
Not / 不用: 从零写 Skill · 替代 skill-eval 行为实验(E 维默认 static_proxy)
Score portfolio-doctor with TRACE+ — where vs skill-reviewer?
给 portfolio-doctor 做 TRACE+ 全维评分。
可直接触发的说法
以下口语输入都应触发本技能:
- 给这个 skill 打分。
- 看看这个技能哪里不符合规范。
- 用 TRACE+ 评一下这个 SKILL.md。
- 这两个技能哪个质量更高?
- 批量扫一下这个 skills 目录。
- SkillHub 分数低,帮我找提分项。
- 和 skill-reviewer 差在哪?
最小可用输入
最低可启动:一个目标 skill 目录,或一个 SKILL.md 文件路径。
推荐输入:目标路径、评分模式(单个/A vs B/批量)、是否有行为评测结果、期望输出格式(JSON / Markdown / 两者)。
可兼容输入:
- 只给目录:自动定位目录下
SKILL.md。 - 只给父目录:按批量模式逐个扫描子目录。
- 只给两条路径:按 A vs B 对比模式。
- 没有 behavior eval:E 维使用
static_proxy,E3 不强行给满。
评测模式
| 模式 | 输出 |
|---|---|
| 单个 | JSON + Markdown(audit-playbook) |
| A vs B | 两份 JSON + 分差表 + 推荐 |
| 批量 | 汇总表 + 各 skill 简评 |
评分前先确认输出格式:JSON、Markdown 或两者。用户未指定时,默认输出 JSON + Markdown。
对比/批量:同一 rubric v2,不得换公式或跳过子项。
工作流
1) 定位 skill 目录(对比/批量则逐个重复 2–6)
2) python scripts/static_audit.py "" → auto_scores(不可改分)
3) Read scoring-engine-deterministic.md → 30 子项 evidence
4) Read 目标 SKILL.md + 链接的 references/scripts
5) composite = round((T+R+F+S+I+E)×100/60, 1) → 评级 + Verdict
6) 按 audit-playbook 输出(含 F 维触发测试各 ≥3 条)
评级 / Verdict / 30 子项定义 / JSON schema → scoring-engine-deterministic.md
硬约束
- 先脚本后 rubric;
auto_scores只补 evidence 不改分 - 30 子项逐项 evidence;禁止旧公式
(T+R+A+C+E)×2 - E 维默认
static_proxy;有 skill-eval 时切换behavioral_eval - Rigid:子项、公式、Verdict 不可改 · Flexible:evidence 表述、Top 修复排序
验收与失败路径
- 路径不存在:先要求用户提供正确路径,不得凭名称臆测
- 缺少 SKILL.md:判定目标不是标准 skill 包,输出结构问题而非强行评分
- 批量模式:每个 skill 必须使用同一 rubric v2 和同一公式
- 无行为评测:明确标注
effectiveness_mode: static_proxy - 完成标准:JSON 算术校验通过,Markdown 报告含 Top 修复项和触发测试
参考文件
| 文件 | 内容 |
|---|---|
| references/scoring-engine-deterministic.md | 30 子项 rubric · 公式 · JSON schema |
| references/audit-playbook.md | 技能质量审计方法手册:报告模板 · 对比/批量 · 触发测试 |
| examples/sample-score-v2.json | JSON 样例 |
| scripts/static_audit.py | 静态审计(唯一运行时脚本) |
相关技能
Evaluate whether a skill is both safe to run and effective at its job. Use when the user wants to test, benchmark, grade, critique, audit, vet, or compare versions of a skill — phrases like "这个 skill 好不好"、"evaluate this skill"、"vet this skill"、"新版本比旧版本好吗"、"帮我测测这个 skill"、"这个 skill 安全吗"、"skill 有没有效果"、
Audit a target SKILL.md against the Agent Skills specification and generate a Chinese HTML report. Use when the user asks to check, audit, review, or optimiz...
Audit another Codex skill for structural compliance, trigger quality, instruction clarity, reuse of scripts or references, and overall maintainability. Use w...
Generic skill-quality auditor for any agent skill (Claude, OpenClaw, Cursor, etc.). Runs a 7-dimension static analysis (D1 process closure & idempotency, D2 tool/command conventions, D3 portability & defense, D4 skill usability, D5 security & op risk, D6 code & doc quality, D7 dependency & footprint) with explicit ERR / WARN severity, 120-point scoring (pass line 90 + zero ERR), and an opt-in `--fix` workflow that always backs up first. Two depths: L1 static (~2 min) and L2 dryRun (~5 min, read-only hub + reachability checks). Strict red lines — read-only by default, never executes the audited skill's writes. Use when the user asks to "audit a skill", "check skill quality", "is this skill ready to ship", "lint my skill", or runs this tool by name. Triggers also: "审计这个 Skill"、"检查 Skill 质量"、"Skill 能上线吗"、 "skill-deep-audit"、"审一下 xxx skill"。
对已存在 Skill 做 8 维度全面体检(结构/安全/触发/有效性/竞争/平台/文档/代码质量)。说 技能审计/审计技能/技能体检 时触发。支持成熟度分级+4确认点+整改+回归审计。绝不自动发布。Do NOT use for creating skills or publishing to platforms.