AIKraft/Skills/computer-use

computer-use

Управляет графическим интерфейсом локальных приложений через `orca computer` (клики, ввод, скриншоты). Используйте, когда требуется GUI-контроль, а программные методы (shell, CLI) недоступны. Не применяйте для встроенного браузера `orca-cli`.

STStably official Разработка ★ 84.9k

Что делает навык

Навык управляет графическим интерфейсом локальных приложений через CLI-инструмент Orca, выполняя клики, ввод текста и анализ скриншотов. Он предназначен для случаев, когда программные методы взаимодействия недоступны, а требуется прямой GUI-контроль. Навык автоматически определяет корректный исполняемый файл Orca в зависимости от среды выполнения.

Когда применять

  • Управление графическим интерфейсом локальных приложений, когда нет доступа к командной строке или API.
  • Взаимодействие с приложениями через скриншоты и клики в средах, отличных от встроенного браузера.
  • Автоматизация задач в Linux-окружениях с учетом специфики терминалов Orca.
  • Работа в средах WSL, где требуется использование переменной окружения ORCA_CLI_COMMAND.

Как работает

  1. Определите исполняемый файл Orca для текущей сессии: проверьте переменную окружения ORCA_CLI_COMMAND.
  2. Если переменная не задана, проверьте наличие переменной ORCA_DEV_REPO_ROOT; если она есть, используйте orca-dev.
  3. Если сессия запущена в Linux вне управляемого терминала Orca, используйте orca-ide (никогда не запускайте просто orca, чтобы не активировать GNOME Orca).
  4. В остальных случаях используйте стандартный исполняемый файл orca.
  5. Замените плейсхолдер ORCA на выбранный исполняемый файл перед выполнением любой команды.
  6. Выполняйте команды через оболочку (POSIX shell, PowerShell или cmd.exe), не создавая переменных окружения для ORCA.

Примеры запросов агенту

Нажми на кнопку 'Сохранить' в открытом приложении и сделай скриншот результата.
Введи текст 'Hello' в поле ввода и нажми Enter в локальном приложении.
Проанализируй текущий экран и найди кнопку 'Отмена', затем кликни по ней.

Что понадобится

  • Наличие исполняемого файла Orca (orca, orca-dev или orca-ide) в системе.
  • Переменная окружения ORCA_CLI_COMMAND (для сессий WSL) или ORCA_DEV_REPO_ROOT (для dev-сборок).
  • Запуск в терминале, управляемом Orca, или использование orca-ide для Linux вне таких терминалов.

Описание составлено по SKILL.md навыка, сверено 05.10.2026.

Как подключить

1Скачать навык
# возьмите папку навыка «computer-use» из репозитория: # https://github.com/stablyai/orca
2Положить папку с SKILL.md к навыкам ассистента
# положите папку навыка туда, где ассистент ищет skills: cp -r computer-use/ ~/.claude/skills/computer-use/

Навык — папка с файлом SKILL.md (описание + инструкции) и опциональными скриптами. Ассистент (Claude, Claude Code и совместимые) подхватывает его по описанию и следует шагам.