Copilot сам кликает по окнам: GitHub научил ИИ работать с программами
1 октября GitHub запустил публичное превью функции computer use. Copilot теперь смотрит на экран, двигает курсор, печатает и листает прямо в обычных программах на Windows и macOS. API для этого не нужен.
Что именно запустили
Новинка работает в двух местах: в консольном Copilot CLI и в приложении GitHub Copilot. Платформы — macOS и Windows. Про Linux в анонсе ни слова.
До сих пор ИИ-помощник разработчика жил в редакторе кода и терминале. Теперь ему отдали остальной рабочий стол. Он читает содержимое окон, разглядывает картинку на экране и нажимает то, что нужно нажать.
GitHub отдельно подчёркивает «старый» софт и программы, у которых есть только графический интерфейс. Ни API, ни командной строки, ни MCP-интеграции там нет.
Бухгалтерская программа времён Windows 7 или корпоративный портал с единственной кнопкой «Отправить» внезапно становятся доступны для автоматизации.
Как включить
В Copilot CLI хватит команды /computer on. Команда /computer show покажет статус, /computer off выключит функцию.
В приложении нужно открыть «Настройки», найти раздел Computer Use и активировать переключатель Enable Computer Use. Команда /computer on там тоже работает.
На macOS придётся отдельно выдать разрешения на «Универсальный доступ» и «Запись экрана». Приложение подскажет, куда нажимать.
Задачу GitHub советует описывать через результат: что получить, в каких программах, с какими ограничениями. Среди примеров — сводка уведомлений в браузере, правка содержимого презентации, перенос данных между настольными приложениями. На иллюстрации к анонсу Copilot проходит цепочку оформления отчёта о расходах в Safari.
Рука на рубильнике
Перед тем как взять приложение под управление, Copilot спрашивает разрешение. Программы, которым вы выдали постоянный допуск, можно просмотреть и сбросить.
Оговорка нужна. ИИ с мышью в руках удобен и слегка тревожен. Ошибся в задаче — и агент отправил не тот отчёт. Подсунули ему на странице хитрый текст — и он, возможно, послушается. О таких рисках у ИИ-агентов специалисты по безопасности говорят давно.
Чего в анонсе нет
Технобезз (Technobezz) перечисляет то, о чём GitHub умолчал. Цена не названа, тариф не указан, даты общего запуска нет. Работает ли функция у пользователей бесплатного Copilot, непонятно.
Это превью, и до финальной версии многое может измениться.
Приложение Copilot показали на Microsoft Build 2026 как площадку для запуска агентов. Сначала оно вышло техническим превью для Windows 11, Windows 11 на Arm, Mac и Linux. Computer use продолжает эту линию.
Не первая попытка
Microsoft уже дала агентам «собственный компьютер» в Copilot Studio. Публичное превью там открылось летом для сред в США. Задачу описываете словами, агент выполняет её на своей машине. Есть хранилище учётных данных и список сайтов и программ, которыми ему разрешено пользоваться.
Теперь та же идея пришла в инструмент, который у разработчика и так всегда под рукой.
Что это значит в России
Сначала придётся решить вопрос с оплатой. Российские банковские карты GitHub не принимает с 2022 года, поэтому разработчики ищут обходные пути. Персональный план Pro стоит $10 в месяц ([сумма в рублях по курсу ЦБ на день публикации]), Pro+ — $39. В какой из них попадёт computer use, неизвестно.
Идея сама по себе близка российскому бизнесу. Программ с интерфейсом из прошлого десятилетия здесь хватает, и возможность автоматизировать их без переписывания выглядит соблазнительно.
Но ИИ-агент видит экран, а на экране бывает всё: от переписки до паролей и коммерческой тайны. Разрешения лучше выдавать по одному и не навсегда.
Источники:
Xrust: Copilot сам кликает по окнам: GitHub научил ИИ работать с программамиКомментарии
