EN

DSH Vision Toolkit

DSH Vision Toolkit 插件提供10个工具,可单独调用,也可组合成工作流。

核验日期

核心信息

以下信息由程序从官方接口读取,不经模型改写。

许可证
MIT
语言
TypeScript
维护方
Anionex
核验日期

它是什么

DSH Vision Toolkit 插件提供10个工具,这些工具可单独调用,也可组合成工作流。该插件把图像理解和确定性的本地图像处理放在同一个 Agent 工作流中。其视觉能力来自一个打包并固定版本的 agent-vision-toolkit 快照。DSH 插件负责安装、会话级工具暴露、凭据、路径检查、取消、超时、结果文件和 Web 展示。

主要能力

  1. 对于 DSH 明确识别为纯文本的路线,插件会注册一个同级的 (Vision Toolkit) 变体。

  2. 默认情况下,在 DSH Web 中粘贴图片会切换到该变体,并向模型提供可复用的工作区路径和围绕当前任务的视觉描述。

  3. 随附的 Skill 会告诉智能体针对不同视觉任务应看什么、选择哪个工具、如何推进以及如何验证结果。

  4. 随附的 vision-skills Skill 包含完整的上游操作手册,说明何时使用各工作流、按什么顺序调用工具以及如何验证结果。

  5. 坐标始终使用原图像素,格式为 x1,y1,x2,y2,因此定位输出可以直接用于裁剪、描摹或后续自动化。

  6. Web 设置面板提供完整的服务商、运行时、超时、图像限制和图像输入变体配置。

怎么上手

  1. 项目称大多数用户无需配置 Python 运行时:插件优先使用系统 Python 3.11+,否则会自动从国内镜像下载固定版本的独立 Python,镜像不可达时回退到 GitHub。

  2. 正常安装不需要 agent-vision-toolkit 源码检出,也不需要本地路径设置。

  3. 使用 DSH Desktop 时,它自带 dsh 命令行工具,并且有意不把它加入系统 PATH。

  4. 设置会保存凭据引用,并且从不把已保存的密钥读回浏览器。

  5. 支持兼容 OpenAI Chat Completions 的端点、OpenAI Responses 和 Anthropic Messages。

摘自 README · sh
dsh plugin --profile web add @anionex/dsh-vision-toolkit
摘自 README · sh
dsh plugin --profile headless add @anionex/dsh-vision-toolkit
摘自 README · sh
dsh plugin --profile desktop add @anionex/dsh-vision-toolkit
摘自 README · yaml
- id: vision-toolkit
  config:
    provider:
      baseUrl: https://api.example.com/v1
      credential: MY_VISION_KEY
      model: your-vision-model
      protocol: openai

适合谁

原生支持图像的模型以及输入模态未知的模型不会被包装。不要把 API 密钥、bearer 令牌、cookie 或其他机密放进 provider.headers,视觉 API 密钥应继续使用 provider.credential。请求头只会注入到位于已配置服务商来源及其基础路径之下的 URL。

已有配置继续使用 Chat Completions。Responses 请求设置了 store 为 false,但该标志不能代替对服务商自身数据保留政策的审查。reasoningEffort 留空时使用模型或代理的默认值,较高的 reasoningEffort 可能消耗更多推理令牌并耗时更长。

timeoutMs 默认为30000,可接受1000到600000。排队等待和执行各自获得该 timeoutMs 预算,因此排队的调用总耗时可能超过 timeoutMs。日志区分 queueMs 与 upstreamMs。

在 Windows 上,已配置的共享根目录目前会被拒绝,原因是其所有权和访问控制列表尚无法被安全验证。每次检查都是单独的多模态请求,包含必要的意图和图像,上下文不会在多次调用之间累积。一次更新把默认模型切换为 Gemini 3.7 Flash,并修复了 Qwen/Gemini 边界框坐标顺序。

来源

本页内容整理自以下官方来源,点击可核对原文。

核验日期 ·

本页由 AI 依据上述官方来源整理,并经自动核对,未经本站实测。 发现错误?告诉我们。