dsh-computer-use

dsh-computer-use 让 DeepSeek Harness 像人一样操作桌面。 观察屏幕、定位界面元素、移动独立虚拟光标、点击、输入、滚动和拖拽。 Give DeepSeek Harness a safe, observable Computer Use layer. Observe desktop applications, locate UI elements, and act through an isolated virtual cursor. 真实演示 · Real demo: a local, non-sensitive page was observed, filled, clicked, and verified through the Computer Use action loop.

中文文档 · English documentation 中文文档 English Documentation 生态入口 · Ecosystem 中文文档 这是什么？

dsh-computer-use 是 DeepSeek Harness 的跨平台 Computer Use 插件，为 AI Agent 增加一套可观察、可约束、可验证的桌面操作能力。

它不是传统的鼠标宏：Agent 必须先观察目标窗口，再基于新鲜快照执行动作。点击、双击和右键操作通过 cua-driver 的独立虚拟光标完成，用户可以看到操作过程，而不是让程序悄悄发送一串不可见事件。

适合用于： 让 DeepSeek Harness 操作原生 macOS、Windows 和 Linux 桌面应用； 操作 Electron、Canvas 或游戏等 Accessibility/AX 信息不完整的界面； 构建“打开应用 → 观察 → 点击 → 输入 → 再观察验证”的 Agent 闭环； 为桌面自动化、内部工具和个人工作流增加可审计的 Computer Use 执行层； 研究 Computer Use、视觉定位和安全护栏。 本项目是开源社区插件，不是 DeepSeek 官方产品，也不代表 DeepSeek 的官方立场。 为什么需要它？

普通文本 Agent 可以生成答案，但无法直接完成很多桌面任务。dsh-computer-use 把桌面交互拆成三个阶段：

核心原则：

1. 先观察，再操作：没有新鲜观察快照时，动作会被拒绝； 2. 模型所见即所点：元素编号和坐标来自同一窗口截图空间； 3. 语义优先：优先使用 element 编号，坐标模式保留视觉操作自由度； 4. 失败关闭：目标不明确、快照过期、应用不在白名单时不继续执行。 能力一览 12 个模型工具 快速开始 方式一：使用 harness-desktop

普通桌面用户建议先下载 harness-desktop。它是一个开箱即用的 DeepSeek Harness 桌面客户端，支持 macOS、Windows 和 Linux。

方式二：从 GitHub 源码安装

安装脚本只做两件事：