在模型推理或实验对比场景中,判断两组转化率的差异是否具有统计学显著性,往往需要编写或引入专门的统计脚本。DeepSeek Harness (DSH) 强调“一切皆插件”,通过插件化机制扩展工具链。dsh-ctr-significance 插件解决了这一计算需求,无需网络依赖即可在本地完成精确计算。
插件定位¶
这是一个专注于模型推理性能评估的 DSH 插件,由开发者 uckkk 维护。它提供了转化率显著性计算能力,旨在让用户在本地快速获取详细的统计结果,用于验证实验或模型调优中的效果差异。
核心能力¶
- 参数精确计算:按参数进行精确计算,并返回详细结果。
- 无网络依赖:纯 Node 实现,无需联网即可运行。
安装¶
通过 DSH 的包管理器安装插件:
dsh plugin add github:uckkk/dsh-ctr-significance
安装后,需在当前会话中调用该插件注册的工具。
依赖项¶
插件运行依赖以下环境:
@deepseek-ai/cordis(^4.0.1)@deepseek-ai/dsh-tools(>=0.1.0-rc.6)
使用方法¶
安装成功后,在会话中直接调用插件注册的工具(工具名为 ctr_significance)即可。
注意事项¶
- 运行权限:插件以当前 DSH 进程的权限运行。
- 代码审查:安装前建议检查源码与许可证(MIT)。
该插件通过本地化计算简化了统计验证流程,适合需要频繁进行转化率对比的开发者。更多细节可查阅 GitHub 或 社区目录。