dsh-benchmark:爲 DSH 工具與插件生成可復現的基準證據

dsh-benchmark 是面向 DeepSeek Harness (DSH) 的工具與插件基準測試插件,旨在提供可復現、確定性的基準證據。該插件圍繞固定用例,通過 `inspect`、`run`、`compare` 三個核心命令,實現協議元數據檢查、固定用例執行及基線迴歸比較,並生成內容尋址報告。安裝後,它在 DSH 中註冊相應工具,並支持通過 CLI 和獨立 stdio MCP server 接口進行交互。使用流程爲:先檢查 manifest 和目標指紋,再運行固定用例寫入產物,最後比較當前報告與基線以評估性能或行爲穩定性。退出碼具有明確含義,分別代表通過、評分失敗或操作錯誤。該插件適用

閱讀全文