Communitygithub.com

stablyai/computer-use

使用 Orca 的 computer-use CLI 來檢查和操作本地桌面應用程式視窗,透過無障礙樹、螢幕截圖和安全的 UI 動作。

computer-use 是什麼?

此技能主要用於讓 AI 代理能夠與本地桌面應用程式進行互動。它依賴於 Orca 的 computer-use CLI,這是一個命令列工具,用於檢查和操作桌面應用程式的視窗。用戶可以透過此技能列出所有應用程式或視窗、取得應用程式狀態、讀取可見 UI 元素、點擊控制項、輸入文字、按鍵、捲動、拖曳、設定數值或執行無障礙動作。支援的平台包含任何桌面應用程式視窗,如瀏覽器視窗、WebView、Orca 應用程式 UI 或其他桌面 UI。觸發詞包含「computer use」、「orca computer」、「read Spotify」、「read Slack」、「control/click/read in a desktop app」以及「get app state」。這對自動化測試、無障礙審核、或需要透過 UI 間接操作應用程式的場景特別有用。

相容平台~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/stablyai/orca/tree/main/skills/computer-use

在你喜歡的 AI 中提問

開啟一個已預先載入此 Agent Skill 的新對話。

說明文件

computer-use 是做什麼的?

使用 Orca 的 computer-use CLI 來檢查和操作本地桌面應用程式視窗,透過無障礙樹、螢幕截圖和安全的 UI 動作。用於桌面應用程式互動:列出應用程式/視窗、取得應用程式狀態、讀取可見 UI、點擊控制項、輸入文字、按鍵、捲動、拖曳、設定數值,或執行無障礙動作。也可用於瀏覽器視窗、WebView、Orca 應用程式 UI 或其他桌面 UI。觸發詞包括「computer use」、「orca computer」、「read Spotify」、「read Slack」、「control/click/read in a desktop app」和「get app state」。

Individual skills in this repo

This repo contains 7 individual skills — each has its own dedicated page.

相關技能