dsh-solar-bench:在固定模型与预算下对照评测 DSH 插件

dsh-solar-bench(@lisihao/dsh-solar-bench)是 lisihao 维护的 DSH 社区插件,在会话 View 的「基准测试」页运行 GSM8K、HumanEval、MMLU-Pro 等公开基准。实验固定模型与 driver,对比无第三方插件的 baseline 与指定插件,以美元预算上限控制花费,并将每次 run 写入版本化 ledger。界面提供基准库、运行记录、对照 scoreboard 与插件加载/暴露诊断。安装需退出桌面应用后使用 bundled CLI 的 plugin add 命令,运行依赖 DeepSeek API key 并会产生费用。适用于需要量化插件对通过率、成本与时间影响的 DSH 开发者。

阅读全文