Claude Co-Work: как ИИ повторяет действия пользователя с помощью записи экрана

Компания Anthropic представила функцию Co-Work для своего ИИ-ассистента Claude, которая позволяет нейросети запоминать последовательность действий на экране и повторять их по команде. Это избавляет от необходимости вручную писать промпты или настраивать сложные сценарии автоматизации. Вместо того чт

Как работает Co-Work

Co-Work — это режим, в котором Claude записывает демонстрацию пользователя: клики, ввод текста, навигацию по меню. После завершения записи ИИ сохраняет последовательность как «навык». В дальнейшем пользователь может запустить этот навык одной командой, и Claude самостоятельно повторит все шаги, адаптируясь к изменениям интерфейса, если они не критичны.

В отличие от традиционных макросов, которые жестко привязаны к координатам экрана, Claude использует компьютерное зрение и понимание контекста. Это значит, что если кнопка переместилась или изменился текст, ИИ всё равно сможет выполнить задачу, если общая логика осталась прежней. Например, если кнопка «Отправить» сместилась на пару пикселей после обновления интерфейса, Claude найдет ее по смыслу, а не по координатам.

Как Co-Work отличается от обычных макросов?

Обычные макросы записывают точные координаты и тайминги. Если окно приложения изменило размер или элементы интерфейса сдвинулись, макрос сломается. Claude же понимает, что именно делает пользователь: например, «нажать кнопку „Отправить“ в правом верхнем углу» — и находит эту кнопку даже после обновления интерфейса. Это делает навыки более надёжными в динамичной среде. Кроме того, Co-Work не просто повторяет движения мыши, а использует компьютерное зрение для идентификации элементов, что позволяет адаптироваться к изменениям.

Предыстория и контекст

Anthropic последовательно развивает способности Claude работать с компьютером. В октябре 2024 года компания выпустила бета-версию Claude Computer Use, позволяющую ИИ управлять курсором и выполнять простые действия. Co-Work — логичное продолжение: вместо того чтобы давать инструкции текстом, пользователь показывает пример.

Это часть более широкого тренда на «агентный» ИИ, когда модели не просто отвечают на вопросы, а самостоятельно выполняют многошаговые задачи. Конкуренты, такие как OpenAI с Operator и Google с Project Mariner, тоже работают в этом направлении, но Co-Work выделяется упором на обучение через демонстрацию. В то время как Operator и Mariner сосредоточены на выполнении задач по текстовым инструкциям, Co-Work позволяет пользователю буквально показать, что нужно делать, что снижает порог входа для автоматизации.

Технические детали и ограничения

На данный момент Co-Work доступен только на плане Claude Max ($200 в месяц) и только на компьютерах Mac с macOS. Поддержка Windows и других платформ пока не анонсирована. Функция работает в десктопном приложении Claude и требует предоставления разрешения на запись экрана.

Anthropic подчёркивает, что запись не передаётся на серверы в реальном времени — обработка происходит локально, что снижает риски утечки данных. Однако сам навык может синхронизироваться между устройствами пользователя. Это означает, что записанные навыки можно использовать на разных Mac, если пользователь авторизован в одном аккаунте.

Какие ограничения есть у Co-Work?

Навыки, созданные с помощью Co-Work, линейны и не умеют принимать решения на основе промежуточных результатов. Если в процессе выполнения возникает неожиданное окно или ошибка, Claude может остановиться или выполнить шаги некорректно. Также функция пока не поддерживает условные ветвления — например, если в зависимости от данных нужно нажать разные кнопки. Кроме того, Co-Work требует стабильного интернет-соединения для синхронизации навыков, хотя сама запись обрабатывается локально.

Кого затронет и как

Новинка в первую очередь интересна профессионалам, которые выполняют повторяющиеся задачи: обработка документов, заполнение форм, извлечение данных. Например, бухгалтер может показать Claude, как ежемесячно выгружать отчёт из бухгалтерской системы, и затем запускать этот навык одним кликом.

Разработчикам Co-Work может помочь в тестировании — записать последовательность действий и повторять её для регрессионных проверок. Однако для сложных сценариев с условными ветвлениями функция пока не годится: навык линейный и не умеет принимать решения на основе промежуточных результатов.

Для обычных пользователей польза пока ограничена из-за высокой цены подписки. Но если Anthropic со временем сделает функцию доступной в более дешёвых тарифах, Co-Work может стать массовым инструментом автоматизации. Например, студенты могли бы автоматизировать заполнение типовых форм, а офисные работники — рутинные операции с документами.

Что будет дальше

Anthropic планирует расширять возможности Co-Work: добавлять поддержку Windows, улучшать адаптацию к изменениям интерфейса и, возможно, позволять комбинировать несколько навыков в один сценарий. В будущем навыки могут стать общими — пользователи смогут делиться ими, как макросами.

Эксперты ожидают, что в течение года аналогичные функции появятся у конкурентов. OpenAI уже тестирует Operator, а Google развивает Project Mariner. Co-Work даёт Anthropic преимущество первого хода в сегменте «обучение через демонстрацию». Если компания сможет быстро расширить поддержку платформ и снизить стоимость, Co-Work может стать стандартом для автоматизации рабочих процессов.

Итог

Co-Work превращает Claude из пассивного помощника в активного исполнителя рутинных задач. Вместо того чтобы описывать словами, что нужно сделать, достаточно показать один раз. Это важный шаг к ИИ, который не просто советует, а делает работу за вас. Следить за развитием функции стоит всем, кто хочет автоматизировать свою ежедневную работу за компьютером. Несмотря на текущие ограничения, Co-Work демонстрирует, как ИИ может учиться на примерах, а не только на инструкциях, что открывает новые возможности для автоматизации.