在模型推理或實驗對比場景中,判斷兩組轉化率的差異是否具有統計學顯著性,往往需要編寫或引入專門的統計腳本。DeepSeek Harness (DSH) 強調“一切皆插件”,通過插件化機制擴展工具鏈。dsh-ctr-significance 插件解決了這一計算需求,無需網絡依賴即可在本地完成精確計算。
插件定位¶
這是一個專注於模型推理性能評估的 DSH 插件,由開發者 uckkk 維護。它提供了轉化率顯著性計算能力,旨在讓用戶在本地快速獲取詳細的統計結果,用於驗證實驗或模型調優中的效果差異。
核心能力¶
- 參數精確計算:按參數進行精確計算,並返回詳細結果。
- 無網絡依賴:純 Node 實現,無需聯網即可運行。
安裝¶
通過 DSH 的包管理器安裝插件:
dsh plugin add github:uckkk/dsh-ctr-significance
安裝後,需在當前會話中調用該插件註冊的工具。
依賴項¶
插件運行依賴以下環境:
@deepseek-ai/cordis(^4.0.1)@deepseek-ai/dsh-tools(>=0.1.0-rc.6)
使用方法¶
安裝成功後,在會話中直接調用插件註冊的工具(工具名爲 ctr_significance)即可。
注意事項¶
- 運行權限:插件以當前 DSH 進程的權限運行。
- 代碼審查:安裝前建議檢查源碼與許可證(MIT)。
該插件通過本地化計算簡化了統計驗證流程,適合需要頻繁進行轉化率對比的開發者。更多細節可查閱 GitHub 或 社區目錄。