Новая модель искусственного интеллекта AI AIPIC

Вы когда-нибудь мечтали об ИИ, который мог бы безупречно взаимодействовать с вашим компьютером, как это делает человек? Теперь эта мечта стала реальностью благодаря последнему новшеству от Anthropic. Во вторник они представили новое поколение своей модели ИИ Claude, названное Claude 3.5 Sonnet, которое может управлять компьютером с удивительной ловкостью. В настоящее время в бета-режиме этот ИИ доступен для разработчиков, чтобы экспериментировать с ним через API.

Anthropic с гордостью называет Claude 3.5 Sonnet «первой передовой моделью ИИ, предлагающей использование компьютера в публичной бета-версии». Это означает, что разработчики могут программировать его для выполнения различных задач на компьютере, таких как просмотр экрана, перемещение курсора, нажатие кнопок и даже набор текста на виртуальной клавиатуре. Цель? Воспроизвести то, как мы ежедневно взаимодействуем с нашими компьютерами.

Хотя этот новый ИИ всё ещё находится в экспериментальной фазе, он не лишён недостатков. Иногда он может быть немного неуклюжим и склонным к ошибкам. Но именно поэтому Anthropic выпустила его в бета-версии — чтобы собрать ценные отзывы от разработчиков и со временем усовершенствовать модель.

Почему нам должно быть важно, что ИИ использует компьютеры?

У Anthropic есть чёткий ответ на этот вопрос: «Огромный объём современной работы выполняется через компьютеры». Позволяя ИИ взаимодействовать с программным обеспечением так же, как это делают люди, открывается множество новых приложений, которые текущие помощники ИИ не могут выполнять.

Какую пользу могут извлечь разработчики и пользователи?

Вместо создания специальных инструментов для каждой задачи Anthropic обучает Claude общим компьютерным навыкам. Это позволяет ИИ использовать широкий спектр стандартных программ, разработанных для людей. Разработчики могут использовать эту возможность для автоматизации повторяющихся задач, создания и тестирования программного обеспечения и даже проведения исследований.

Несколько компаний уже используют компьютерные навыки Claude 3.5 Sonnet, включая Asana, Canva, Cognition, DoorDash, Replit и The Browser Company. Например, Replit использует эти возможности для улучшения своего продукта Replit Agent.

Как обучали Claude использовать компьютеры?

Обучение Claude управлению компьютером включало множество проб и ошибок, по словам Anthropic. Процесс требует, чтобы ИИ понимал и интерпретировал изображения компьютерного экрана, а затем решал, какие действия предпринять на основе увиденного. Claude 3.5 Sonnet достигает этого, анализируя скриншоты, подсчитывая пиксели для точного перемещения курсора и выдавая команды мыши.

Насколько хорошо работает Claude?

В тестах бенчмаркинга OSWorld, которые оценивают способность моделей ИИ использовать компьютеры, Claude 3.5 Sonnet получил оценку 14,9%. Хотя это значительно ниже человеческого уровня производительности в 70–75%, это почти вдвое больше, чем 7,7%, набранные следующей лучшей моделью ИИ в той же категории.

Несмотря на эти многообещающие результаты, использование компьютера Claude всё ещё находится на начальной стадии. Он пока не может выполнять более сложные задачи, такие как перетаскивание окон или масштабирование экрана. Кроме того, поскольку он полагается на скриншоты, он может пропустить некоторые действия и уведомления.

Anthropic остаётся оптимистичной, заявляя: «Мы ожидаем, что использование компьютера быстро улучшится, станет быстрее, надёжнее и полезнее для задач, которые хотят выполнить наши пользователи». Они также подчёркивают, что по мере развития технологии она станет более доступной для тех, у кого меньше опыта в разработке программного обеспечения, при этом сохраняя строгие меры безопасности.

Claude 3.5 Sonnet теперь доступен для всех. Разработчики могут начать создавать приложения с бета-версией использования компьютера на Anthropic API, Amazon Bedrock и Google Cloud Vertex AI.