DeepSeek Harness (DSH) 採用插件化架構,開發者可以通過組合不同插件構建智能體。在開發涉及視覺交互的智能體時,需要模型具備識別圖像中手勢的能力。下面介紹一個模型推理類插件,它可以將圖片中的手勢轉換爲結構化的檢測框信息。
這是什麼¶
xby-gesture-detection 是由 xby-skill 維護的 DSH 插件。它屬於模型推理類別,核心功能是輸入一張圖像,對其中的手勢進行檢測,並輸出圖片中所有目標的檢測框、置信度和標籤。
核心功能¶
插件提供以下主要功能:
- set_xby_apikey:在聊天中設置 API 密鑰。該操作會自動持久化,重啓 DSH 後依然有效。
- gesture_detection:輸入一張圖片的鏈接,檢測其中的手勢,返回檢測框、置信度和標籤。
- gesture_detection_for_data_base64:輸入圖片的 BASE64 編碼,進行同樣的手勢檢測。
- gesture_detection_for_data_file:輸入本地圖片文件的路徑,進行手勢檢測。
安裝與啓用¶
使用官方提供的安裝命令將插件添加到指定 profile 中:
dsh plugin --profile web add github:xby_skill/xby-gesture-detection
典型用法¶
- 設置密鑰:首先需要註冊小笨羊官網並獲取 API 密鑰。在 DSH 聊天窗口中調用
set_xby_apikey命令輸入密鑰。 - 檢測圖片鏈接:調用
gesture_detection並提供圖片的 URL。 - 檢測 Base64 圖片:調用
gesture_detection_for_data_base64並提供 Base64 字符串。 - 檢測本地文件:調用
gesture_detection_for_data_file並提供本地文件路徑。
注意事項¶
- 該插件依賴外部 API 服務,使用前需前往小笨羊官網註冊並獲取 API 密鑰。
- 插件以當前 DSH 進程的權限運行,安裝前請檢查源碼與許可證(MIT)。
生態背景¶
DSH 理念是「一切皆插件」。此插件位於社區目錄,與 DeepSeek / 幻方無官方從屬關係。