dsh-reckoner:DeepSeek Harness 確定性計算引擎
dsh-reckoner 是 curtainsmall 維護的 DeepSeek Harness 擴展插件,旨在解決 LLM 評估中缺乏嚴格計算邏輯和可復現性的問題。它提供了一個確定性計算引擎,將推理轉化爲結構化程序計算。 核心功能包括確定性計算引擎、公式評估工具、記錄管理以及 Web 搜索集成。用戶可通過 `set`、`get`、`eval` 等命令進行數值讀寫與計算,支持將結果導出爲 Markdown 或 LaTeX 文檔。該插件要求 Node.js >= 20,支持數值、複數、數組和對象,但不提供 Shell、文件系統及網絡權限。
閱讀全文DeepSeek Harness 插件:dsh-replay-lab
dsh-replay-lab 是 DeepSeek Harness 的插件,旨在解決模型與 Harness 交互產生的差異難以復現的問題。它通過凍結回合、隔離候選會話,提供請求表面回放、A/B 實驗及多維對比功能,幫助開發者分析推理路徑、成本及調試長軌跡或迴歸問題。插件支持自定義 Prompt,數據安全且不影響源會話,適合深入分析“模型×Harness”組合效應。
閱讀全文