Почему это важно именно вам
Осталась последняя дверь, которую мы не открывали. До сих пор Claude работал с файлами, командами, внешними системами через подключения и с браузером через расширение. Но часть работы живёт там, где нет ни файла, ни API: в приложении, которое умеет только кликать мышкой.
Computer use снимает это ограничение — Claude видит ваш экран и управляет им: открывает программы, нажимает кнопки, вводит текст. Возможность мощная, экспериментальная и требующая осознанного решения, поэтому урок будет честным: где она реально выручает и где ей не место.
Что это такое
Computer use — встроенный MCP-сервер computer-use, выключенный по умолчанию. Включается через меню /mcp, состояние запоминается для проекта.
Статус — research preview, только на macOS, только на тарифах Pro и Max (на Team и Enterprise недоступен), и только в интерактивной сессии: в режиме -p он не работает.
При первой попытке система запросит два разрешения macOS:
- Универсальный доступ — чтобы кликать, печатать и прокручивать;
- Запись экрана — чтобы видеть, что происходит.
Оба выдаются вам, а не Claude: это стандартный механизм macOS, и отозвать их можно там же, в системных настройках.
Это самая широкая власть, которую вы даёте
Разрешив управление компьютером, вы отдаёте не доступ к папке, а доступ к экрану и клавиатуре. Открытая почта, банк-клиент, мессенджер с перепиской — всё это в зоне досягаемости. Ни песочница, ни правила разрешений сюда не дотягиваются: они ограничивают файлы и команды, а не мышь. Включайте только под конкретную задачу и выключайте после.
Как работает на практике
Включить
/mcp
Найдите в списке computer-use, выберите и включите. Дальше — обычный запрос словами: «открой такое-то приложение, найди там раздел отчётов, выгрузи данные за август».
Claude делает скриншот, находит нужный элемент, кликает, проверяет результат следующим скриншотом. Работает медленнее человека и заметно дороже: каждый шаг — это картинка в контексте.
Где это оправдано директору
Честный список короткий:
- Программа без экспорта. Внутренняя система, из которой данные достаются только глазами и мышкой. Разовая выгрузка за период — то, что computer use делает лучше всего.
- Проверка того, что видит пользователь. Не «данные в базе верные», а «на экране показывается то, что нужно».
- Приложения без API. Настольный клиент, у которого нет ни экспорта, ни интеграции.
Где не оправдано
- Есть API, экспорт или файл. Всегда предпочитайте их: быстрее, дешевле, воспроизводимее.
- Веб-интерфейсы. Для сайтов есть работа через браузер (День 59) — она надёжнее, чем клики вслепую.
- Регулярные операции. Медленно, дорого и ломается от любого изменения интерфейса. Автоматизировать кликами то, что повторяется каждый день, — плохая инженерия.
- Всё, что касается денег и отправки наружу. Банк-клиент, почта, мессенджеры — не место для эксперимента.
Правило выбора
Спросите: «Есть ли у этих данных другой выход, кроме экрана?» Если есть файл, выгрузка, API или коннектор — берите их. Computer use — это последний вариант, когда других дверей нет.
Частые ошибки
Включить и забыть выключить. Разрешение живёт для проекта, а власть у него максимальная. Возьмите за правило выключать сервер после задачи.
Ждать надёжности как у скрипта. Клик по координатам ломается при смене разрешения экрана, темы, версии программы. Для регулярных задач нужен другой путь.
Оставлять на экране лишнее. Claude видит весь экран целиком. Перед запуском закройте почту, мессенджеры и всё, что не относится к задаче.
Пытаться использовать в автоматических прогонах. Возможность работает только в интерактивной сессии — в -p и по расписанию её нет.
Считать, что песочница защитит. Она ограничивает файлы и сеть; мышь и клавиатуру она не ограничивает никак.
Когда нужно / когда нет
Стоит: разовая задача с приложением, у которого нет другого выхода, — под вашим присмотром, с чистым экраном, с выключением после.
Не стоит: регулярные операции, работа с деньгами и перепиской, любые сценарии без вашего наблюдения, а также всё, где есть файл или API.
Связь с другими уроками
День 59 — работа с браузером. Для сайтов используйте её: работа через расширение надёжнее кликов по экрану.
День 86–87 — разрешения и песочница. Здесь они бессильны: границы задаёт только ваше решение включить сервер и выключить его после.
День 91 — откат. Клики мышью чекпойнты не отслеживают: последствия придётся разбирать руками.
Задание на сегодня
- Решите честно, есть ли у вас задача, у которой нет другого выхода, кроме экрана. Если нет — это правильный ответ, и включать ничего не нужно.
- Если есть — включите
computer-useчерез/mcpна тестовом сценарии, где ошибка ничего не стоит. - Перед запуском закройте всё лишнее на экране.
- Проведите одну задачу и засеките, сколько времени и лимита она съела по сравнению с ручным выполнением.
- Выключите сервер после и запишите вывод: стоит ли это того в вашем случае.
Критерий «выполнено»: у вас есть обоснованное решение — использовать или нет, — а не впечатление от демонстрации.
Резюме
- Computer use — встроенный MCP-сервер
computer-use, выключен по умолчанию, включается через/mcp(состояние запоминается для проекта). - Research preview, только macOS, только Pro и Max, только интерактивная сессия; требует разрешений macOS на универсальный доступ и запись экрана.
- Оправдан там, где у данных нет другого выхода, кроме экрана: приложения без экспорта и API, проверка того, что видит пользователь.
- Не оправдан для регулярных операций, веб-интерфейсов (там работа через браузер) и всего, что касается денег и переписки.
- Ни песочница, ни правила разрешений не ограничивают мышь и клавиатуру — единственная граница здесь ваша.
- Включать под задачу и выключать после; перед запуском убирать с экрана всё лишнее.