Прямое управление без API
Anthropic анонсировала новую возможность в рамках Claude Cowork и Claude Code: Computer Use. Теперь модель может взаимодействовать с вашим компьютером так же, как человек — кликать мышью, печатать текст и навигировать по приложениям. Это работает без необходимости писать скрипты или использовать API, если для целевого сервиса нет готового коннектора.
Функция доступна в десктопном приложении Claude для macOS (версия 15+) и Windows. На macOS 15+ Claude работает в фоновом режиме, не перехватывая курсор и клавиатуру, и запрашивает разрешение только при необходимости полного контроля экрана.
Приоритет инструментов и ограничения
Алгоритм выбора метода взаимодействия строится на скорости и надежности. Сначала Claude пытается использовать официальные коннекторы (Gmail, Slack, M365), затем встроенный браузер, и только в последнюю очередь — прямой доступ к экрану. Взаимодействие через экран медленнее и более подвержено ошибкам, чем прямые интеграции.
| Метод взаимодействия | Скорость | Надежность | Пример использования |
|---|---|---|---|
| Connectors (API) | Высокая | Максимальная | Получение сообщений из Slack |
| Browser | Средняя | Высокая | Работа с веб-интерфейсами |
| Screen Interaction | Низкая | Средняя | Управление локальными приложениями без API |
Безопасность и риски
Anthropic подчеркивает, что Computer Use работает без песочницы. Модель делает скриншоты экрана для навигации, что означает доступ к любой видимой информации, включая личные данные. Хотя Claude обучен избегать опасных операций (переводы средств, удаление файлов), система не идеальна и может подвергаться prompt-инъекциям.
Рекомендации от разработчиков:
- Не предоставлять доступ к банковским, медицинским и государственным приложениям.
- Использовать функцию для простых задач (поиск, организация файлов), избегая сложных многошаговых сценариев.
- Регулярно проверять действия Claude, так как ошибки возможны.
Доступность и настройка
Функция находится в стадии бета-тестирования и доступна только пользователям планов Pro и Max. Для активации необходимо обновить приложение до последней версии, перейти в Settings > General и включить переключатель Enable computer use. Команды Team и Enterprise пока не имеют доступа к этой возможности.
Источник: Claude ↗