Communitygithub.com

stablyai/computer-use

使用 Orca 的 computer-use CLI 检查并操作本地桌面应用窗口,支持无障碍树、截图和安全 UI 操作。适用于桌面应用交互:列出应用/窗口、获取应用状态、读取可见 UI、点击控件、输入、按键、滚动、拖拽、设置值或执行无障碍操作。也可用于浏览器窗口、Web 视图、Orca 应用 UI 或其他桌面 UI。触发词包括“computer use”、“orca computer”、“read Spotify”、“read Slack”、“control/click/read in a desktop app”和“get app state”。

computer-use 是什么?

stablyai/computer-use 技能利用 Orca 提供的 computer-use CLI 工具,允许 AI 代理(如 Claude Code、Cursor)以安全的方式操作本地桌面应用窗口。它通过无障碍树(Accessibility Tree)、截图和安全的 UI 动作(如点击、输入、滚动、拖拽等)来获取桌面应用的状态和交互。该技能适用于多种场景,包括桌面应用程序、浏览器窗口、Web 视图以及 Orca 自身的 UI。常用的触发短语包括“computer use”或特定应用名称如“read Spotify”,方便代理快速启动桌面交互任务。

兼容平台~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/stablyai/orca/tree/main/skills/computer-use

在你喜欢的 AI 中提问

打开一个已预加载此 Agent Skill 的新对话。

文档

computer-use 是做什么的?

使用 Orca 的 computer-use CLI 检查并操作本地桌面应用窗口,通过无障碍树、截图和安全的 UI 动作。适用于桌面应用交互:列出应用/窗口、获取应用状态、读取可见 UI、点击控件、输入、按键、滚动、拖拽、设置值或执行无障碍操作。也可用于浏览器窗口、Web 视图、Orca 应用 UI 或其他桌面 UI。触发词包括“computer use”、“orca computer”、“read Spotify”、“read Slack”、“control/click/read in a desktop app”和“get app state”。

Individual skills in this repo

This repo contains 7 individual skills — each has its own dedicated page.

相关技能