dsh-vision-edge-doubao:用 Edge + 豆包網頁版給 DSH 補上識圖能力

前言

DSH(DeepSeek Harness)走的是「一切皆插件」的路線,模型缺什麼能力就由插件補什麼。但純文本的 DeepSeek 模型遇到圖片就無能爲力:做數學建模題時,幾何圖、流程圖、數據圖表裏的信息模型讀不到,只能靠人工轉述。

現有的識圖插件大多依賴 Chrome + Gemini,需要申請 API Key、配置密鑰,對只想快速跑通的人來說步驟偏多。dsh-vision-edge-doubao 換了一條路:驅動本機 Edge 瀏覽器,複用豆包網頁版的登錄態來識圖,零成本、免 API Key。下面介紹這個插件的具體做法。

這是什麼

dsh-vision-edge-doubao 是一個 DSH 視覺插件,作者 iceBear662,MIT 許可證,當前版本 0.1.1。它在本地啓動一個 Edge 調試實例打開豆包網頁版,把 DSH 會話裏的圖片和識別請求轉發給豆包,再把回答提取回傳,模型由此獲得識圖能力。

項目借鑑了 dsh-vision(作者 54xkeee,MIT License)的架構與豆包橋接方案,主要改動是把橋接瀏覽器從 Chrome 換成 Edge,並修復了豆包網頁改版後的輸入框定位、回覆提取、長文本發送等兼容問題。

核心功能

  • 通用識圖:照片、截圖、OCR 文字識別、區域細查(region)、多圖對比(compare)。
  • 數學建模圖專項(mode=math):對數學建模常見的五類圖做深度結構化識別——幾何圖形、流程圖、數據圖表、表格、公式,其中公式輸出 LaTeX 轉錄。
  • 澄清閉環:識別遇到不確定項時,插件在結果裏返回 clarify 問題(例如「點 D 是否爲 BC 的中點?」),你回答後插件帶着補充信息重新識別,得到更精確的結果。
  • 免維護登錄:豆包登錄態保存在獨立的瀏覽器配置裏,一次登錄長期使用,重啓電腦也不用再登。
  • 零成本:複用瀏覽器登錄態,不需要申請任何 API Key。
  • 專家模式自動確保:插件自動確保豆包使用專家模式識圖(持久設置,切換一次後長期保持),每次識圖前做冪等檢查。想切回快速模式,可在啓動橋接前設置環境變量 DOUBAO_MODE=quick;自動切換遇到異常時會靜默降級,繼續用當前模式識圖。
  • 緩存:相同圖片返回緩存結果以省流量,換一種問法即可重新識別。
  • 豆包橋接兼容:處理了 ProseMirror 輸入框、長文本一次性插入、虛擬滾動回覆提取、多段回覆合併;提示詞采用回答優先 + 禁用表格(規避豆包表格渲染丟失)+ 防注入頭。

環境要求

  • Windows,需要 Edge 瀏覽器
  • 已安裝 DeepSeek Harness(DSH)Web GUI
  • Node.js ≥ 18(橋接組件需要)

安裝與啓用

安裝採用 README 標註的推薦方式,從 GitHub 添加:

dsh plugin --profile web add github:iceBear662/dsh-vision-edge-doubao

安裝後重啓 dsh web 生效,插件在啓動時加載。

如需卸載,執行:

dsh plugin --profile web remove dsh-vision-edge-doubao

首次配置(只需一次)

1、運行一鍵啓動腳本:

powershell -ExecutionPolicy Bypass -File <插件目錄>\start-vision-edge.ps1

腳本自動完成三件事:啓動 Edge 調試實例(獨立配置,不影響日常瀏覽器)、啓動豆包橋接、驗證環境。安裝後腳本位於 node_modules\dsh-vision-edge-doubao\start-vision-edge.ps1。

2、登錄豆包:在彈出的 Edge 窗口打開 https://www.doubao.com,掃碼或手機號登錄一次。登錄態保存在獨立配置中,之後不用再登。

3、開始使用:在 DSH 會話裏直接發圖片給模型,或說「看看這張圖」,模型會自動調用 vision 工具。

識圖參數

mode 控制識別模式:glance(通用)/ ocr(文字轉錄)/ region(區域細查)/ compare(多圖對比)/ math(數學建模專項)。

detail 控制精細程度:auto / fast / standard / deep,其中 auto 會自動升級複雜圖。

適用場景與注意

適合誰:Windows + Edge 環境、不想爲識圖申請 API Key 的 DSH 用戶。做數學建模、需要識別幾何圖形 / 流程圖 / 圖表 / 公式的場景收益最明顯。

使用前有幾點必須知道:

  • 插件通過自動化驅動瀏覽器,複用你已登錄的豆包會話識圖,可能違反豆包/字節跳動的服務條款,存在賬號被限制或封禁的風險。建議使用非主力賬號,不要用於商業用途或批量抓取,併合理控制調用頻率。
  • 本項目與豆包、字節跳動無任何關聯;豆包網頁端改版可能導致插件失效,不保證長期可用。
  • 識別超時多半是 Edge 被關閉過,重新運行 start-vision-edge.ps1 即可恢復;豆包偶發人機驗證,稍等重試即可。
  • 插件以當前 dsh 進程的權限運行,安裝前建議先閱讀源碼,確認許可證(MIT)與代碼內容可以接受。

結尾

一句話總結:dsh-vision-edge-doubao 用本機 Edge 加豆包網頁版,把識圖能力以零成本補進 DSH,數學建模圖專項和澄清閉環是它區別於一般識圖插件的地方。

  • GitHub:https://github.com/iceBear662/dsh-vision-edge-doubao
  • 社區目錄頁:https://www.skillhub.cn/plugins/iceBear662/dsh-vision-edge-doubao (獨立社區站點,與 DeepSeek / 幻方無官方從屬關係)
羽毛球分组比赛记分
小程序二维码

欢迎使用《羽毛球分组比赛记分》微信小程序

小夜