review-workflow:多评委独立评审的 DSH 工作流插件

前言

智能体执行评审类任务时,常见的问题是评审结论受单一视角影响,或者各评委互相看到对方的打分后被带偏。很多团队的做法是让一个 prompt 里写「请分角色评审」,但这仍然是同一个上下文里的自我对话,偏见无法隔离。下面介绍的 review-workflow 插件,把评审拆成「N 个互不可见的评委 + 一台聚合分歧 + 一个独立的 Critic」,流程做成固定的 6 步,每步都有 checkpoint。

插件仓库是 YaoleWu/review-workflow,分类为工作流,当前 3 个星标、1 个 fork,许可证 MIT,版本 0.1.0。README 里的安装命令指向 github:LeslieWylie/review-workflow,仓库 author 字段也写的是 LeslieWylie;正文按资料原文记录,安装时以 README 命令为准。SkillsHub 目录页为独立社区站点,与 DeepSeek / 幻方无官方从属关系。

这是什么

一个通用多评委评审工作流 skill。它从内部协作评审流程脱敏泛化而来,只提供评审流程骨架,具体的评审维度、评分标准、模板由使用方提供。适用场景包括项目评审、论文审稿、代码审查、设计评审等。

核心机制有三点:

  1. 多个评委用独立 subagent 并行运行,互相看不到对方的打分;
  2. 分歧通过两阶段处理:先做锚定匹配,再做 Δ 等级裁决;
  3. Critic 用独立 subagent 复核流程合规性,挑战理据不足的部分。

核心功能

模块 内容
6 步流程 + 6 Checkpoint 材料完整性检查 → 准备 bundle → N 评委并行打分 → 聚合分歧 → Critic 复核 → 出最终决定
N 评委并行独立打分 评委用独立 subagent 运行,互不可见
锚定一致性检查 锚定匹配 → Δ 等级裁决,两阶段处理分歧
Critic 独立复核 独立 subagent 复核流程合规性
复评支持 增量复评,只重评与修改项相关的维度
可配置 评审维度、评分标准、模板、评委数量均可配置

设计原则里比较值得注意的两条是:Checkpoint 强制,每步未通过就不进入下一步;所有中间产物存盘,可追溯。

安装与启用

安装命令来自 README:

dsh plugin --profile web add "github:LeslieWylie/review-workflow"

重启后,在任意会话中加载 skill:

load review-workflow

所需配置

这个 skill 需要项目级配置,放在项目自己的 skill 或配置文件中,不能靠插件自带默认值直接跑(插件只提供流程骨架)。

配置项 说明 示例
rubric 评审维度与评分标准 5 维度 5 分制,每维度有锚定描述
bundle 模板 评审材料包模板 bundle.md
panelist prompt 评委 prompt 模板 panelist-prompt.md
aggregation 模板 聚合报告模板 aggregation.md
critic 模板 复核报告模板 critic-report.md
checklist 材料完整性检查清单 proposal-checklist.md
panelist 数量 评委人数 2
评分阈值 各维度通过/不通过阈值 ≥3/5

典型用法

按 README 的流程,一次完整评审走 6 步:

  1. 材料完整性检查:按 checklist 核对提交材料,不通过则退回;
  2. 准备 bundle:按 bundle 模板生成评审材料包;
  3. N 评委并行打分:每个评委在独立 subagent 中按 rubric 打分,互不可见;
  4. 聚合分歧:先做锚定匹配,仍不一致的做 Δ 等级裁决;
  5. Critic 复核:独立 subagent 检查流程合规性,挑战理据不足的结论;
  6. 出最终决定:通过 checkpoint 后输出聚合报告。

需要复评时,只让评委重评与修改项相关的维度,不必整包重审。

适用场景与注意

适合需要结构化、多人、可追溯评审结果的场景,尤其是结论会影响资源分配或发布决策的时候。如果只是临时看一眼代码,直接让智能体读一遍更快,不值得搭这套流程。

两点需要注意。第一,插件以当前 dsh 进程的权限运行,安装前应检查源码,确认其行为与项目相符。第二,项目级配置必须由使用方自己提供,插件不包含通用的评审维度和标准,指望装上就能直接评审是误区。仓库许可证为 MIT,授权层面相对宽松,但源码仍需自行审阅。

结尾

review-workflow 的价值不在评审内容本身,而在把评审流程固定下来:角色隔离、Checkpoint 强制、过程留痕。适合已经有结构化评审需求、愿意自己定义 rubric 和模板的团队。

  • 目录页:https://www.skillhub.cn/plugins/YaoleWu/review-workflow
  • GitHub:https://github.com/YaoleWu/review-workflow
羽毛球分组比赛记分
小程序二维码

欢迎使用《羽毛球分组比赛记分》微信小程序

小夜