dsh_omnivision:OmniParser 驱动的 GUI 智能体插件
OmniVision 是一款基于 OmniParser 的 GUI 智能体插件,旨在解决模型在缺乏原生多模态视觉能力时难以理解屏幕并操作界面的难题。该插件将屏幕内容转化为包含文本、图标及坐标的结构化数据,支持屏幕识别、桌面自动化(点击、输入等)、实时 Dock 识别、图片解析及工具调用记录等功能。安装需满足 Windows 平台及 OmniParser 服务运行等条件,主要面向 DeepSeek Harness 桌面任务开发场景。
阅读全文