DSH Marketplace

DSH-vison

hisence999/DSH-vison

DSH-vison 是一个 DeepSeek Harness 插件,为不支持多模态的模型补充图片理解能力。agent 仍可直接接收图片;插件调用 DSH 中已配置的视觉模型生成文字描述,再把描述交给纯文本模型。原始图片会保留在会话历史中,UI 仍可显示图片;模型侧则通过替换后的消息看到描述文字。readimage 工具也会采用同样的处理方式,多模态模型则自动放行,不重复识别。

安装

把 DSH-vison 装进 DeepSeek Harness

装到哪

GitHub 方式 · GitHub 源码

从 GitHub 装会执行项目自己的构建脚本,而 pnpm 默认拦着不让跑——先跑一次这条命令,pnpm 会打印出要加到 ~/.dsh/profiles/web/pnpm-workspace.yaml 里 `allowBuilds` 下面的那个 key。

我们跑过之后

我们跑过,装得上

这里每条命令都在一次性容器里、对着干净 profile 真跑过,结果取自 harness 自己的记录,不是读源码猜的。 最近一次 10 天前,DeepSeek Harness 0.2.2-rc.1.

挂进你的 README

实测可装 — dshmarketplace

给维护者的:badge 取这条 listing 最近一次 sandbox 实测的结果,重跑之后它自己会变,读者点开就是这页的完整记录。

安装前须知

装 DSH-vison 之前,先看这几条

  • 源码在这里: hisence999/DSH-vison——从社区帖子人工收录,没有进入 DSH 自带市场的那个精选库。
  • 开源协议:MIT。

安全

装 DSH-vison 会执行什么

构建脚本

我们这次实装里没有构建脚本被拦。

来源:我们在沙箱里的实装,DeepSeek Harness 0.2.2-rc.1,10 天前。

安装钩子

package.json 里没有 preinstall / install / postinstall 脚本。

来源:最近一次同步时读到的 GitHub 上的 package.json。prepare 没有记录——它只在从 GitHub 装时执行,被 pnpm 拦下时会出现在「构建脚本」那一行。

README 里提到

shell 命令(bash、exec、spawn 之类)

来源:对 README 做的关键词匹配,只提示它可能碰到什么,不是代码分析。

这不是安全审计。上面是一次实装记录加两次文本扫描,没有人替你读过这个插件的代码。插件带着你 agent 的权限在跑。

AI 锐评

是什么 — DSH-vison 为纯文本模型提供图片理解,通过配置的视觉模型将图像转为描述文字。

谁该装 — 当你使用纯文本模型处理包含图片的用户消息时,需要图片理解能力。 如果你使用支持图片的模型,可以不安装此插件。

注意 — 沙箱实测通过:在全新 profile 里装上,并被 harness 注册进 profile。没发现明显的坑。

锐评 — 我会安装它,因为沙箱测试通过且安装后全局生效。

grok-4.6 写的,只当参考,不当结论。里面说装得上或装不上,是在干净 profile 里真跑过的;其余都是读仓库读出来的。以实际运行为准。

DSH-vison 是做什么的

Image tiles split between preserved records and a description path before converging in a model chamber.

DSH-vison 是一个 DeepSeek Harness 插件,为不支持多模态的模型补充图片理解能力。agent 仍可直接接收图片;插件调用 DSH 中已配置的视觉模型生成文字描述,再把描述交给纯文本模型。原始图片会保留在会话历史中,UI 仍可显示图片;模型侧则通过替换后的消息看到描述文字。read_image 工具也会采用同样的处理方式,多模态模型则自动放行,不重复识别。

插件通过包装 llm.resolveModelInfo 放宽图片准入和工具门禁,并监听 agent/pre-step、tools/post-execute、system-prompt/assemble。配置保存在 dsh-image-vision,可设置开关、识别模型和提示词;cordis.patch.yml 中的 enabled 与 patchAdmission 可作为兜底配置。

它适合需要让纯文本模型处理用户图片的 DSH 部署,但至少要先配置一个支持图片的模型。描述不会跨轮缓存,后续再次发送图片仍会调用视觉模型。插件还会通过 PowerShell 或 shell 脚本修改 $DSH_HOME 下的 profile 文件和 dsh-host-apiproxy 白名单;不希望插件触及这些终端文件时,不应使用它。

DSH-vison 的文档

配置

插件使用 dsh-image-vision settings namespace,设置页提供开关、识别模型和提示词。profile 补丁中的兜底配置为:

Key Value
enabled true
patchAdmission true

patchAdmission 是对共享 llm service 的可逆包装。设置页还要求把 dsh-image-vision 加入 dsh-host-apiproxy 的 WEB_SETTINGS_NAMESPACES 白名单,否则页面找不到该 namespace。

文件与宿主集成

插件文件为 index.js、client.js 和 package.json,放在 $DSH_HOME/profiles/<profile>/node_modules/dsh-image-vision/。profile 的 $DSH_HOME/profiles/<profile>/cordis.patch.yml 需要包含名为 image-vision、指向 dsh-image-vision 的条目。脚本会修改 dsh-host-apiproxy 中的白名单;升级 DSH 后该文件可能被覆盖,需要重新处理。

命令与平台

Windows 使用 install.ps1、uninstall.ps1,Linux 和 macOS 使用 install.sh、uninstall.sh。卸载会删除插件、image-vision 条目和白名单修改;配置默认保留。Windows 可用 -PurgeConfig,Unix 可用 --purge-config 一并清理配置。安装或卸载后都要重启 DSH。

已知限制

必须至少配置一个支持图片的模型。描述不跨轮缓存,同一轮同一图片只识别一次;后续再次发送仍会调用视觉模型。识别失败时会以 0.6s 间隔重试其他可用模型,全部失败则写入占位文字,不把图片直接交给纯文本模型。

根据项目自己的文档整理,会跟着上游更新。两边对不上时以源码仓库为准—— 去 GitHub 看原始 README

同一分类

DSH-vison 的同类插件

10k

给纯文本模型补视觉:describe_image 把本地路径/URL/附件图片交给可配置的 OpenAI 兼容视觉端点,进会话的只有返回文本。

没有一行式安装命令——这个插件在一个大仓库的子目录里,也没发 npm 包。

GitHub 源码TypeScript2 天前

AI 锐评

dsh-tool-describe-image

是什么 — dsh-tool-describe-image 是纯文本模型的图像描述工具。支持将本地路径、URL或附件发送至配置的 OpenAI 兼容视觉端点,仅返回文本进入会话。

谁该装 — 在使用 DeepSeek Harness 的纯文本模型处理图像附件时,用户适合安装此插件。 使用支持原生视觉模型的用户可以选择不安装,因为他们的模型有内置图像处理能力。

注意 — 在全新 profile 中安装并注册测试通过,未发现明显的坑。 静态检查未发现任何问题。

锐评 — 我会装,因为它让纯文本模型在会话中处理图像输入。

grok-4.6 写的,只当参考,不当结论。里面说装得上或装不上,是在干净 profile 里真跑过的;其余都是读仓库读出来的。以实际运行为准。去看源码
1详情

esp32-iphone-agent

onehumanbeing

4.4k

Let an AI model use a real iPhone with a $7 ESP32: AirPlay eyes, USB HID hands, any OpenAI-compatible vision model. No Mac, no developer account, no jailbreak.

我们跑过,装得上

GitHub 源码Swift11 天前

AI 锐评

esp32-iphone-agent

是什么 — 经 ESP32-S3 把 iPhone 画面交给兼容 OpenAI 的视觉模型,并用 USB HID 点按、滑动和输入。

谁该装 — 在 DeepSeek Harness 里跑兼容 OpenAI 的视觉模型,要把「设重复闹钟并保存」这类步骤做到真机 iPhone 上,同时不走 Mac、开发者账号和越狱。低于 iOS 18、或没有已烧录固件的 ESP32-S3,不必装:没有接收端,链路接不起来。

注意 — 板子会开热点当 AirPlay 接收端,手机要开 AssistiveTouch,模型请求走蜂窝;视觉接口的 API key 或 token 得自备,运行中会执行 shell 命令。指针是相对位移,应用会甩动指针再在画面里校正。在全新 profile 里可以装上并被 DeepSeek Harness 注册。

锐评 — profile 注册成功只说明插件能进 harness,不说明真机已被驱动;我会先看 TestFlight 里镜像和点击是否已经稳定,再决定放不放进 profile。

grok-4.6 写的,只当参考,不当结论。里面说装得上或装不上,是在干净 profile 里真跑过的;其余都是读仓库读出来的。以实际运行为准。去看源码
2源码

modlens

liustack

4.4k

为纯文本模型架起视觉桥梁:粘贴图片,输出结构化 JSON 证据(OCR、版面、语义)。

我们跑过,装得上

npm 包TypeScript1 个月前

AI 锐评

modlens

是什么 — 给 DeepSeek Harness 里的纯文本模型处理直接粘贴的图片,产出带 OCR、阅读顺序版面和实体关系的结构化 JSON。

谁该装 — 用 DeepSeek-V4-Flash、DeepSeek-V4-Pro、GLM-5.3 或 MiMo Pro 在 DeepSeek Harness 里核对界面截图、扫描件时,模型看不见图,缺转写和版面证据。日常已经开在 GLM-5.3-Flash 这类被确认带原生视觉的路由上的人不必装,插件会跳过它们,粘贴仍走原来的多模态通道。

注意 — 实测在全新 profile 里能装上并被注册进 profile。读图走本机已有的 Claude Code、Codex、OpenCode、Pi 登录,或 Antigravity CLI、Gemini、OpenAI 兼容密钥;免费 Gemini 一次约 5–10 秒,逗号分隔密钥会在鉴权、限流或配额失败时轮换。它会执行 shell 命令;屏幕截取热键不在本包,要另找 dsh-screenshot。

锐评 — 装。不写 hook、不改 DeepSeek Harness 配置、不跑本地代理,卸了只删一个文件夹,这个可逆性够我放进常用 profile。

grok-4.6 写的,只当参考,不当结论。里面说装得上或装不上,是在干净 profile 里真跑过的;其余都是读仓库读出来的。以实际运行为准。去看源码
1详情

为纯文本模型"看图“设计更好的视觉工具箱和技能,支持多图理解,图片问答,前端UI还原、GUI 自动化等,并可选无缝接入多个主流agent,直接识别粘贴图片| A vision toolkit and skill designed for text-only llms — image Q&A, long-screenshot OCR, frontend UI restoration, and GUI automation, with optional seamless integration for Codex, Claude Code, Pi, Oh My Pi, and OpenCode

我们跑过,装得上

GitHub 源码Python1 个月前

AI 锐评

agent-vision-toolkit

是什么 — 给纯文本 agent 配看图 CLI 和 skill,做多图问答、长截图 OCR、前端还原和 GUI 自动化。

谁该装 — 在 DeepSeek Harness 里用 DeepSeek 对着设计稿或产品截图改前端、操作 GUI 时,模型吃不到像素。主 agent 已经是多模态、对话里贴图就能问能改的人,用不上这层 CLI。

注意 — 实测在全新 profile 里能装上并被 harness 注册。从 GitHub 源码安装,能力通过 shell CLI 提供。粘贴图要无缝进对话需另内部署本地代理;DSH 的 10 个结构化视觉工具在 dsh-vision-toolkit submodule 中,不初始化就没有。

锐评 — 我装,因为我要的是 harness 补眼,不是为了看图去换掉 DeepSeek。

grok-4.6 写的,只当参考,不当结论。里面说装得上或装不上,是在干净 profile 里真跑过的;其余都是读仓库读出来的。以实际运行为准。去看源码
1源码

为纯文本 Agent 提供视觉能力:内置免 Key 视觉链 + 像素级视觉工具(看图问答、定位、裁剪、像素对比、取色、OCR、矢量化、抠图、截图);粘贴图片即可用。

我们跑过,装得上

npm 包JavaScript23 天前

AI 锐评

dsh-vision-router

是什么 — 给 DeepSeek Harness 上的纯文本 agent 接识图链路和像素工具,composer 开启 Vision 后贴图即可调用。

谁该装 — 你在 DeepSeek Harness 里用纯文本模型处理报错截图、给 UI 控件定位、做 OCR 或设计稿对比,但当前聊天模型吃不进图片。图像不能出机、也不打算自己接视觉后端的人不必装。

注意 — 实测在全新 profile 里能装上,并被 harness 注册。默认会把原图或裁剪、视觉提示和相关请求元数据发到云端视觉提供方,新装还开着匿名 OVHcloud 回退,免 key 并不等于离线。运行过程中会执行 shell 命令。

锐评 — 我会装进日常用的 profile:要的是可重复的 tool turn,不是多一个能看图的聊天窗口。

grok-4.6 写的,只当参考,不当结论。里面说装得上或装不上,是在干净 profile 里真跑过的;其余都是读仓库读出来的。以实际运行为准。去看源码
1详情

让纯文本模型处理视觉任务:粘贴图片后自动切换到 Vision Toolkit 变体,支持图片问答、多图比较、长截图 OCR、截图还原前端 UI、元素定位与像素对比。默认无需 API Key——图片经作者自建的免费服务处理,每台机器每天 100 张;也可改为指向自己的服务商。

DeepSeek Harness 0.2.2-rc.1 拒装最新版

npm 包TypeScript23 天前

AI 锐评

dsh-vision-toolkit

是什么 — 给纯文本模型贴图后切到 Vision Toolkit 变体,做图像问答、多图对比、长图 OCR、截图还原 UI、元素定位和像素 diff。

谁该装 — 在 DSH Web 里用纯文本模型改界面或排障,材料只是贴进会话的截图。 已经固定使用带视觉的模型、不会切回纯文本的人不必装。

注意 — 实测 DeepSeek Harness 0.2.2-rc.1 会在安装前拒掉目前所有版本,因为声明的 DSH 范围不含该版本。默认图片走作者托管的免费服务,每机每日 100 次,也可改成自己的 provider。

锐评 — 我会挂着等作者更新 DSH 范围,而不是放弃或强装最新版。

grok-4.6 写的,只当参考,不当结论。里面说装得上或装不上,是在干净 profile 里真跑过的;其余都是读仓库读出来的。以实际运行为准。去看源码
详情