DeepSeek Harness (DSH) 采用插件化架构,开发者可以通过组合不同插件构建智能体。在开发涉及视觉交互的智能体时,需要模型具备识别图像中手势的能力。下面介绍一个模型推理类插件,它可以将图片中的手势转换为结构化的检测框信息。
这是什么¶
xby-gesture-detection 是由 xby-skill 维护的 DSH 插件。它属于模型推理类别,核心功能是输入一张图像,对其中的手势进行检测,并输出图片中所有目标的检测框、置信度和标签。
核心功能¶
插件提供以下主要功能:
- set_xby_apikey:在聊天中设置 API 密钥。该操作会自动持久化,重启 DSH 后依然有效。
- gesture_detection:输入一张图片的链接,检测其中的手势,返回检测框、置信度和标签。
- gesture_detection_for_data_base64:输入图片的 BASE64 编码,进行同样的手势检测。
- gesture_detection_for_data_file:输入本地图片文件的路径,进行手势检测。
安装与启用¶
使用官方提供的安装命令将插件添加到指定 profile 中:
dsh plugin --profile web add github:xby_skill/xby-gesture-detection
典型用法¶
- 设置密钥:首先需要注册小笨羊官网并获取 API 密钥。在 DSH 聊天窗口中调用
set_xby_apikey命令输入密钥。 - 检测图片链接:调用
gesture_detection并提供图片的 URL。 - 检测 Base64 图片:调用
gesture_detection_for_data_base64并提供 Base64 字符串。 - 检测本地文件:调用
gesture_detection_for_data_file并提供本地文件路径。
注意事项¶
- 该插件依赖外部 API 服务,使用前需前往小笨羊官网注册并获取 API 密钥。
- 插件以当前 DSH 进程的权限运行,安装前请检查源码与许可证(MIT)。
生态背景¶
DSH 理念是「一切皆插件」。此插件位于社区目录,与 DeepSeek / 幻方无官方从属关系。