DeepSeek Harness 插件:ark-auto-check

前言

在火山方舟的 Agent Plan 中選擇 Auto 後,API 返回的 model 字段始終爲 "auto",無法直接獲知實際路由目標。這對需要精確控制模型行爲或排查路由異常的開發者來說,是一個明確的盲區。

DeepSeek Harness(DSH)提供了一個名爲 ark-auto-check 的插件,通過採樣與指紋比對的方式,推斷 Auto 入口當前指向的具體模型。

插件定位

ark-auto-check 是 DSH 的一個技能插件,由維護者 1w1w11w1 開發。它只用於識別火山方舟 Agent Plan 中候選清單(16 個模型)內的模型歸屬,不涉及計劃外模型、中轉站或其它廠商的模型。

核心價值是:在無法直接獲取路由信息的情況下,給出「AUTO 當前路由到哪個模型」的結論與置信度。

核心功能

探針採樣與指紋比對

插件提供一個技能 auto-router-check。執行時會對 AUTO 入口(ark-code-latest)發起約 150 次請求,每次提示詞爲「請從 1 到 355 之間隨機選擇一個數字」,並附帶隨機 nonce 防止緩存。

探針通過以下方式得出結論:

  • 主信號:使用 cos·e^-JSD 衡量請求分佈與候選模型的指紋相似度,並結合 G 檢驗進行統計顯著性判斷
  • 輔助信號:推理語言、推理長度、tokenizer 簽名
  • 混合路由檢測:使用 EM(精確匹配)與 BIC(貝葉斯信息準則)判斷是否存在混合路由

會話內查詢

在任意 DSH 會話中直接詢問「auto 現在路由到哪個模型」,會話會派出子代理執行上述探針,並在約 3–10 分鐘後返回結論、置信度與 Top5 排名。

範圍限定

插件明確限定在 Agent Plan 的候選模型範圍內:

  • ✅ 在範圍內:AUTO 歸屬判定;計劃內模型之間的自檢式比對(使用 --target 抽查);指紋庫覆蓋查詢
  • ❌ 不在範圍內:計劃外模型(其它廠商 / Coding Plan / 按量平臺 / 第三方中轉站 / 自建服務)、中轉站是否偷換模型、來源鑑定與維權、能力測評或榜單

探針腳本內置斷言:--target 只接受 ark-code-latest 或 16 個計劃內模型,baselines.json 包含計劃外模型時會直接拒絕執行(exit 3)。

安裝與啓用

通過官方命令安裝:

dsh plugin add 1w1w11w1/ark-auto-check

或在 DSH 的插件市場 / Skills 界面按倉庫地址安裝。插件以 dsh.bundle 形式註冊技能,安裝後需重啓會話即可生效。

手動方式:將 skills/auto-router-check/ 複製到 ~/.dsh/skills/(Windows:%USERPROFILE%\.dsh\skills\)同樣可用。

使用前提

  • 本機已安裝並登錄 arkcli,且持有火山方舟 Agent Plan
  • 探針運行時從 arkcli profile apikey get 讀取憑證;也可通過 --api-key 或環境變量 AUTO_PROBE_API_KEY 顯式傳入
  • Python 3.10+(探針僅使用標準庫)

隱私與更新

  • 倉庫內不含任何憑證、API Key、本機路徑或用戶信息;憑證只在運行該技能的本機上從 arkcli 臨時讀取,不回傳
  • 探針只向模型發送隨機數提示詞,不攜帶任何會話或用戶數據
  • baselines.json 爲各候選模型公開行爲的統計指紋(分佈計數與延遲 / token 統計),無個人信息
  • 指紋庫採集於 2026-10-23(16 模型 × 約 400 次主探針 + 輔助探針);若結論異常(所有候選得分都低),可能是指紋庫過期,拉取本倉庫更新即可

適用場景

  • 需要精確確認 Auto 路由目標,用於調試或審計
  • 在計劃內候選模型之間進行自檢式比對(使用 --target 參數抽查)
  • 需要快速獲得 AUTO 路由的 Top5 候選模型排名

注意事項

  • 插件以當前 DSH 進程權限運行,安裝前應檢查源碼與許可證
  • 結論是「當下時點」的結果;官方調整路由後需重跑探針
  • 插件不保證 100% 準確,僅提供基於指紋比對的推斷,請結合其它信息綜合判斷

結尾

ark-auto-check 爲火山方舟 Agent Plan 的 Auto 路由提供了可操作的排查手段。如果你在開發中需要精確知道「Auto 到底在用哪個模型」,可以參考目錄頁與 GitHub 倉庫獲取更多信息。

  • 目錄頁:https://www.skillhub.cn/plugins/1w1w11w1/ark-auto-check
  • GitHub:https://github.com/1w1w11w1/ark-auto-check
羽毛球分组比赛记分
小程序二维码

欢迎使用《羽毛球分组比赛记分》微信小程序

小夜