← 返回列表
D

dsh-mindseye

v0.1.0 · 1 天前发布

MindsEye: intent-routed vision, structured evidence, and exact cache for DeepSeek Harness

dsh-plugindeepseek-harnessvisionmultimodalagent

README

MindsEye

让 DeepSeek 原生看图 —— intent-routed vision for DeepSeek Harness

MindsEye 是一个 DeepSeek Harness（dsh）vision 插件。粘贴图片后，图片原样显示在会话里，DeepSeek 继续负责思考，视觉模型负责看图。插件根据问题自动路由到合适的视觉能力，返回结构化 JSON（含真实 token 用量），并通过缓存与多图批量减少重复开销。

核心体验

  • 粘贴即看图：接管 deepseek-official 路由，图片原生进入会话；接管不可用时自动降级为路径粘贴，新图始终能发出去

  • 模型有建议权，规则有仲裁权：模型可给出意图建议，内置规则在置信度高时纠正，模糊时尊重模型

  • 多图一次读：批量读取多张图片，批量遇 4xx 按指数拆分降级，失败只影响单张

  • 旧会话不毒化：历史带图会话在回退模式下也能正常对话，图片块自动替换为附件标记

  • 每次调用透明：返回 provider、model、延迟、token usage、fallback 标记，成本可审计

    • 已实现功能

    图片入口

  • 原生粘贴/拖拽（接管模式，模型选择器无分身）

  • paste-to-path 兜底：文本模型场景下自动把粘贴转为路径文本

  • mindseye_read_image 支持本地路径、单张附件 id、批量附件 id

    • 路由与输出

  • 三档路由：understand（通用理解）、extract（OCR/文字提取）、locate（像素定位）

  • 意图仲裁：模型可建议三档意图，内部规则细分 OCR、视觉问答、定位、布局、图表、颜色、像素差异等，规则置信度 ≥ 0.8 时优先

  • 结构化 JSON：`imag

    • 版本兼容矩阵

    DSH 版本状态说明
    dsh@0.1.0-rc.6 ✅ 兼容 cordis patch ✅
    dsh@0.1.0 ✅ 兼容 标准 patch ✅
    dsh@0.2.0 ⚠️ 待验证 待实测（API 可能在变）
    dsh@0.3.0+ ❓ 未知 尚未发布

    💡 兼容矩阵每周末自动跑实测，欢迎 PR 修正

    元数据

    License
    MIT
    npm
    dsh-mindseye
    Repo
    —
    Engines
    {"node":">=22.19"}
    Weekly DL
    0
    Monthly DL
    0
    dsh.bundle
    {"bundle":{"patch":"./cordis.patch.yml"},"client":{"inject":["@deepseek-ai/dsh-client-connection","@deepseek-ai/dsh-client-locale","@deepseek-ai/dsh-client-runtime","@deepseek-ai/dsh-client-ui-settings","@deepseek-ai/dsh-client-ui-settings-plugins"],"platform":"web"}}