$ loading_
让大模型在 Linux(含 Wayland)上截屏并操控鼠标键盘。
复制安装指令,让 AI 自动完成配置 · 推荐新手
"desktop-mcp" 暂无可直接复制的安装信息,请查看页面文档或源码仓库。
请在我的 Linux 桌面上帮我打开应用、点击按钮并完成一段重复操作;必要时先截图确认当前界面。
输出基于截图的桌面操作步骤,并实际执行鼠标键盘动作。
请帮我在 Linux 桌面环境中检查某个界面的按钮是否可点击,并根据截图反馈当前状态。
输出截图检查结果,并可辅助完成简单的手动式界面验证。
请根据当前桌面截图判断我下一步该点哪里,并代我执行鼠标和键盘操作。
给出基于当前屏幕的操作指引,并完成对应输入。
适合需要让 AI 直接操作 Linux 图形界面的用户,比如重复点击、填写表单或切换应用。它能通过截图感知界面状态,再执行鼠标和键盘动作。
适合开发者或测试人员在 Linux(含 Wayland)环境中做界面检查。它能协助确认界面是否呈现正确,并完成基础交互验证。
适合需要边看屏幕边操作的场景,比如远程协助或使用说明不清晰时。工具可先看截图,再按指令代为点击和输入。
它是一个 MCP 工具,允许大模型在 Linux 桌面上截取屏幕截图,并控制鼠标和键盘。原始描述还明确提到支持 Wayland。
根据描述,它面向 Linux 桌面环境,并且包括 Wayland。其他前置条件未在给定信息中说明。
它是通过 MCP 让大模型直接基于截图理解界面,再进行鼠标和键盘操作。更具体的实现细节见源码仓库。
让 AI 在 Linux 桌面上截图、识别界面并执行鼠标键盘操作自动完成任务
通过 Linux 桌面控制能力,让 AI 自动执行截图、输入与窗口操作任务。
让 AI 通过语义定位查看并操控 Windows 桌面与应用流程
在 Windows 上捕获桌面窗口截图,帮助 AI 理解界面并支持开发调试。
支持截取整个桌面或指定窗口截图,并自动复制到剪贴板便于跨平台使用。
通过截图、窗口管理与鼠标键盘控制,实现 Windows 桌面自动化操作。