Команда Anthropic научила ИИ управлять вашим компьютером с помощью чат-бота Claude 3.5 Sonnet

ИИ-стартап Anthropic представил обновленную версию своего чат-бота — Claude 3.5 Sonnet. Теперь он способен работать на компьютере словно живой человек. Модель может перемещать курсор, нажимать на кнопки и даже вводить текст, что открывает новые возможности для автоматизации.

В Anthropic подчеркнули, что вместо создания специализированных инструментов, они обучили Claude общим компьютерным навыкам. Это позволяет использовать уже существующие программы и решения, разработанные для людей, чтобы автоматизировать различные задачи, такие как тестирование ПО и выполнение повторяющихся процессов.

Для разработчиков был создан API, который позволяет модели воспринимать компьютерные интерфейсы и взаимодействовать с ними. Однако компания предупредила, что функция находится на стадии эксперимента, поэтому возможны ошибки. Тестирование уже начали такие компании, как Asana, Canva, Cognition, DoorDash, Replit и The Browser Company.

Несмотря на новаторские возможности, Claude сталкивается с определенными сложностями при выполнении задач, которые кажутся людям простыми. К таким операциям можно отнести прокрутку страниц, масштабирование или перетаскивание объектов.

В Anthropic также заявили об улучшениях модели в области программирования. В частности, эксперты отметили, что ИИ стал лучше справляться с многоэтапными процессами разработки. По их мнению, это делает его «идеальным выбором» для таких задач. Хорошие отзывы поступили также от компаний Cognition и The Browser Company.

Модель Claude 3.5 Haiku тоже показывает сильные результаты в программировании, набрав 40,6% на тесте SWE-bench Verified и опередив многих конкурентов.

Стоит отметить, что в октябре модель GPT-4o от OpenAI заняла первое место в рейтинге по программированию на языке Solidity. Она оставила позади другие ИИ-решения, включая o1-preview и o1-mini.