Anthropic представила для свого інструменту агентів для програмування Claude Code нову функцію «Computer Use» («керування комп’ютером») у вигляді дослідницького прев’ю (Research Preview) для користувачів macOS. Ця функція дозволяє Claude безпосередньо керувати екраном комп’ютера користувача — відкривати застосунки, натискати кнопки, вводити текст, робити скріншоти та, в межах одного й того самого діалогу, з’єднувати виконання повного робочого процесу від написання коду до тестування UI, не виходячи з термінала.
Що саме Claude може допомогти тобі «натискати»?
Згідно з офіційною технічною документацією, Computer Use в основному призначено для задач, які потребують графічного інтерфейсу (GUI), тобто для тих речей, які «ти зазвичай відкладаєш від термінала й робиш сам»:
Побудова та перевірка нативних застосунків: попроси Claude написати macOS App із панеллю меню — він сам скомпілює, запустить, послідовно натисне всі елементи керування й підтвердить, що функції працюють коректно; ти навіть ще не відкривав цей App.
Кінцева наскрізна UI-тестування: вкажи на локальний застосунок Electron і скажи «протестуй онбординг-процес для новачків» — Claude відкриє App, натисне крок реєстрації та зробить скріншоти для кожного екрану. Немає потреби налаштовувати Playwright, немає потреби в тестовому фреймворку.
Виявлення та виправлення візуальних і макетних проблем: скажи Claude «цей Modal на маленькому вікні вирізається» — він зменшить розмір вікна, відтворить баг, зробить скріншот, змінить CSS і знову перевірить результат виправлення — він бачить те, що бачиш ти.
Інструменти, які мають лише GUI: інструменти для дизайну, панелі керування обладнанням, iOS Simulator або будь-яке спеціалізоване програмне забезпечення, яке не має CLI чи API.
Пріоритет вибору інструментів Claude
Computer Use — це «найпоширеніший, але й найповільніший» інструмент; Claude обиратиме найточніший спосіб у такому порядку:
Є відповідний MCP Server → використати MCP
Це shell-команда → використати Bash
Це операції в браузері й є налаштування Claude in Chrome → використати розширення Chrome
Усе вище не підходить → тоді вмикається Computer Use
Тобто керування екраном призначене для сценаріїв, де «іншими способами не дістатися»: нативні застосунки, емулятори, інструменти без API.
Як увімкнути Computer Use
Computer Use доступний у вигляді вбудованого MCP Server (назва:
computer-use
), за замовчуванням вимкнений; потрібно вручну увімкнути:
У інтерактивній сесії Claude Code виконай /mcp, знайди в списку computer-use (відображається як вимкнений)
Після вибору натисни Enable; налаштування зберігатимуться для проєкту персистентно, кожному проєкту достатньо налаштувати один раз
Під час першої спроби, коли Claude почне керувати комп’ютером, macOS попросить надати два дозволи: Accessibility (доступність) та Screen Recording (запис екрана). Після надання дозволів обери «Try again» (повторити спробу); у деяких випадках може знадобитися перезапуск Claude Code
Кожна робоча сесія потребує поетапного дозволу для застосунків
Увімкни
computer-use
Вмикання
computer-use
не означає, що Claude може керувати всіма застосунками на твоєму комп’ютері. Кожного разу в межах робочої сесії, коли Claude вперше потрібно керувати певним App, у терміналі з’явиться підказка з повідомленням:
Які App Claude хоче контролювати
Чи є запит на додаткові дозволи (наприклад, доступ до буфера обміну)
Скільки інших App буде приховано під час роботи
Обери «Allow for this session» (дозволити для цієї сесії) або «Deny» (відхилити); дозвіл діє лише в межах поточної робочої сесії. Для App із широкими правами системного доступу система також додатково покаже попередження:
Як Claude працюватиме на твоєму екрані
Повне монопольне блокування: після запуску Computer Use буде отримано блокування рівня машини; якщо інша сесія Claude Code вже використовує комп’ютер, новий запит зазнає невдачі та запропонує спочатку завершити іншу робочу сесію.
Тимчасове приховування інших App: коли Claude починає керувати екраном, несанкціоновані видимі App будуть приховані, щоб Claude взаємодіяв лише із дозволеними застосунками. Твоє вікно термінала лишається видимим і не буде зроблене скріншотом; ти зможеш одразу спостерігати, а Claude не бачитиме власні результати виводу. Після завершення Claude приховані App автоматично відновляться.
Можливість у будь-який момент перервати: коли Claude отримає блокування, macOS покаже сповіщення «Claude is using your computer · press Esc to stop». У будь-який час натисни
Esc
або в терміналі натисни Ctrl+C — це миттєво перерве роботу; Claude звільнить блокування, відновить усі App і поверне контроль тобі.
Захисні механізми та межі довіри
Офіційна документація окремо підкреслює, що на відміну від пісочених (sandbox) Bash-інструментів, Computer Use виконується безпосередньо у твоєму настільному середовищі, тож межі довіри інші. Вбудовані запобіжники включають:
Дозвіл по кожному App: Claude може керувати лише тими App, які ти явно дозволив у межах поточної сесії
Сторожове попередження: App, які отримують доступ до Shell, файлової системи або системних налаштувань, будуть спеціально позначені до надання дозволу
Автоматичне виявлення ін’єкції підказок: Claude перевіряє вміст на екрані та позначає потенційні атаки з ін’єкцією підказок
Умови та обмеження
Потрібна підписка на Pro або Max (Team, Enterprise не застосовуються)
Потрібна версія Claude Code v2.1.85 або новіша
Наразі підтримується лише macOS (етап дослідницького прев’ю)
Потрібно використовувати в інтерактивній робочій сесії, не підтримується неінтерактивний режим (прапорець -p)
Застосунки на кшталт браузера та платіжних платформ — лише «режим перегляду»; термінал і IDE — «режим натискання»; інші App — повний контроль
MacRumors зазначає, що порівняно з конкурентами Computer Use у Claude має більш суворий пріоритет прав доступу, і наразі обмежений лише Mac, тоді як інші рішення вже підтримали macOS, Windows і Linux.
Для розробників найбільша цінність цієї функції — скорочення циклу «написати код → протестувати → виправити баг»; Claude не лише пише код, а й власноруч дивиться на твій екран, щоб підтвердити результат.
Попередження про ризики Інвестиції у криптовалюту мають високий рівень ризику, її ціна може сильно коливатися, і ви можете втратити весь основний капітал. Будь ласка, уважно оцініть ризики.
Ця стаття Claude Code нова функція: AI безпосередньо керує твоїм Mac екраном, від написання коду в терміналі до клікового тестування «під ключ» вперше з’явилася на сайті 鏈新聞 ABMedia.
