dsh-llm-verifier:多候选补丁的验证、排序与受控应用

dsh-llm-verifier 是 Web0926 维护的 DeepSeek Harness 插件,将「生成多个候选补丁→测试筛选→LLM 排序→人工审批应用」固化为工作流。它对同一编码任务运行 3 或 5 个候选,各自在独立 detached Git worktree 中工作,先执行确定性验证剔除失败候选,再用 llm-verifier 排序,仅剩一个通过者时直接胜出,2 个用 1 个 pivot,3–5 个用 2 个。插件设两道审批门:候选执行前与应用补丁前各一道,应用前复查仓库路径、base HEAD、干净状态与补丁 SHA-256。验证命令可自动检测或显式指定,支持 npm/pnpm

阅读全文
dsh-llm-verifier:DSH 的可配置 LLM 复核插件

dsh-llm-verifier 是 DSH 原生插件,旨在引入独立复核机制解决多候选方案选择、长任务进度跟踪及会话验收问题。它基于可配置的裁判模型,通过显式工具 verifier_compare、verifier_select、verifier_track 和 verifier_current_session 进行判定,采用 A-T 细粒度标尺并换算为 0-1 分数。插件支持概率期望评分、位置偏见消除及持久化缓存,在 agent/turn-stopping 边界自动调度验收流程。安装后 DSH 自动对齐配置,用户可通过 Web 界面设置 Provider、模型及并发策略,也可将其作为 npm

阅读全文