SkillHub上架评测:上架前给 Agent Skill 做一次五维体检

前言

自己写了一个 Agent Skill,跑通几个用例之后,最难回答的往往不是「能不能用」,而是「能不能上架、上架之后质量算不算及格」。手工检查一遍 README、一遍入口脚本、一遍权限声明,费时且标准不统一;两个人查,结论经常不一致。

下面介绍的是 SkillHub 上的社区 Skill「SkillHub上架评测」。它把上架前的质量检查收敛到一个固定框架上,按同一套维度打分,输出五维得分、阻断项和分优先级的优化方案。

这是什么

一句话定位:一个用于 Agent Skill 上架前质量评测的 Skill,按 SkillHub TRACE 框架打分并给出优化清单。

  • 坐标:@user_0dea6a1d/trace-skill-evaluator
  • 名称:SkillHub上架评测
  • 版本:1.1.1
  • 来源:community
  • 发布者:user_0dea6a1d
  • 分类:data-analysis
  • 标签:requires_api_key=false(不需要额外的 API Key)
  • 页面数据(抓取时):评分 100000,下载 2666,安装 0

注意评分口径:页面显示的是站点评分体系下的一个整数(100000),不是百分比,也不是 0–5 分制。不要把它当成「满分」。

它解决的问题是:把「这个 skill 该不该上架、差在哪、先改哪一项」从主观判断变成可复现的逐项打分。

TRACE 框架:5 维 15 子项

框架名称 TRACE,五个维度分别是:

  1. Trust(可信):来源是否清楚、声明是否与实际行为一致。
  2. Reliability(可靠):同样的输入是否稳定得到可用的结果。
  3. Adaptability(适应):面对不同的输入形式和边界情况是否还能工作。
  4. Convention(规范):目录结构、入口约定、SKILL.md 写法是否符合平台惯例。
  5. Effectiveness(有效):是否真的完成了它声明的任务,产出是否可用。

每个维度下分 3 个子项,合计 5 维 15 子项。子项是打分的最小单位,评测结果按子项汇总到维度,再汇总成五维得分。

核心能力

按已核实的简介,该 Skill 提供三件事:

  1. 五维得分。对被评测的 Agent Skill 逐子项打分,输出 Trust / Reliability / Adaptability / Convention / Effectiveness 五个维度的得分。
  2. 阻断项。把会直接导致无法上架、或上架后必然出问题的项单独列出来。阻断项与普通低分项是分开的,评测结果里不会把「可优化」和「必须先解决」混在一起。
  3. 分优先级优化方案。按优先级排列的改进项,而不是把 15 个子项结果平铺出来让人自己挑。

触发方式上,官方给出的关键词包括「TRACE 评测」「上架前评 skill」「skill 质量打分」「五维度评测」「评一下这个技能包」「上架 SkillHub 前检查」「出 skill 优化方案」。也就是说它既可以在准备上架时做整包评测,也可以在改完一版之后单独要一份优化方案。

安装与启用

这一步需要如实说明。该 Skill 基于通用 SKILL.md 格式,通常的做法是按 SKILL.md 约定把 skill 目录放到 Agent 的 skill 路径下,并在会话中按名称或关键词触发。

但本次抓取中,官方页面 https://www.skillhub.cn/skills/user_0dea6a1d/trace-skill-evaluator 与 API 地址 https://api.skillhub.cn/user_0dea6a1d/trace-skill-evaluator 均无法访问,抓取失败。抓取资料里也没有给出具体的安装命令、目录路径或配置文件字段。因此这里不写命令,避免给出无法核对的操作步骤。

上架或使用前,请打开官方页面确认三件事:安装方式(平台目录、CLI 命令还是 marketplace 一键安装)、触发词是否需要在本地配置、以及评分与下载数据的最新值。

典型用法

抓取资料中没有提供可复现的完整对话示例或命令行示例,只有触发关键词清单。下面按官方关键词给出可直接使用的提问方式,输出预期以官方页面为准。

提问示例:

请按 TRACE 框架对这个 skill 包做上架前评测,给出五维得分、阻断项和分优先级优化方案。
帮我评一下这个技能包,看看上架 SkillHub 前还差什么。
出一份 skill 优化方案,按优先级排。

评测对象可以是本地目录、压缩包,或已发布的 skill 地址;具体支持哪种输入形式未在抓取资料中说明,建议以官方页面为准。

适合谁与注意

适合这几类人:

  1. 准备把 Skill 发布到 SkillHub 的开发者,做上架前自检。
  2. 改完一版想确认质量有没有回退的人,用它替代人工逐项翻看。
  3. 需要给团队统一评测口径的人,让不同人对同一个 skill 得到一致的维度划分。

几点限制:

  1. 评分是框架下的打分结果,不是官方准入结论,也不能替代平台侧的实际审核。
  2. 它评测的是 skill 包本身(结构、约定、稳定性、有效性),不负责修复问题,改代码仍要自己动手。
  3. 页面数据是抓取时的快照,评分与下载量会变化;安装数显示为 0,说明该包在抓取时点上还没有产生安装量。
  4. requires_api_key=false 只表示它不需要额外的 API Key,不表示被评测的 skill 不需要凭证。

结尾

这套东西的价值在于把上架前的质量检查固定成 5 维 15 子项,一次评测就能拿到五维得分、阻断项和带优先级的优化方案,不用每次重新决定「该查什么」。

官方地址:https://api.skillhub.cn/user_0dea6a1d/trace-skill-evaluator

羽毛球分组比赛记分
小程序二维码

欢迎使用《羽毛球分组比赛记分》微信小程序

Xiaoye