返回技能库
元技能

skill-up

阿里官方的技能评测器:给你的 Skill 写测试用例

  • 元技能
  • 技能评测
  • 质量保障
平台
Qoder CLI / Claude Code / Codex / Qwen Code
收费
开源免费(Apache-2.0)
作者
Alibaba

安装

npx skills add https://github.com/alibaba/skill-up/tree/main/skills/skill-upper

详细介绍

阿里巴巴出品的 Agent Skill 评测与进化 CLI(Go 编写,Apache-2.0):用 eval.yaml + cases 声明式描述评测用例,同一套用例可在 Qoder CLI / Claude Code / Codex / Qwen Code 多引擎跑分,支持规则、脚本、Agent 三种裁判,产出 Anthropic 兼容的 grading.json 与 JUnit / HTML 报告,可直接接进 CI。主推姿势是装仓库自带的 skill-upper 技能——说「评测这个 Skill」,Agent 自己写用例、诊断失败、修技能或修用例、循环跑到通过。

核心特性

  • 声明式评测:eval.yaml + cases/*.yaml,不再手搭运行目录
  • 多引擎跑同一套用例:Qoder CLI / Claude Code / Codex / Qwen Code
  • 三种裁判:rule_based、script、agent_judge
  • 兼容导入 Anthropic 的 evals.json,报告格式与官方评测闭环对齐

适用场景

  • 写完 Skill 想验证它到底管不管用,而不是凭感觉
  • 技能改版后跑回归,防止越改越坏
  • 对比同一个技能在不同 Agent 下的质量差异
适合谁

认真做自己的 Skill 的人,和 skill-creator 配成一对:一个负责写、一个负责验。注:观察记录采集审核目前需 Codex 观察者插件,评测本身不限引擎。

相关分类