Anthropic представила обновленную Claude 3.5 Sonnet и экспериментальную возможность computer use. Через API разработчики могли передавать модели изображения экрана и получать действия для работы с интерфейсом: перемещение указателя, нажатия и ввод текста. Компания предложила использовать этот механизм для автоматизации повторяющихся операций и проверки программ.
Функция вышла в публичной бета-версии через платформы Anthropic, Amazon Bedrock и Vertex AI. В самом анонсе разработчик предупреждал, что управление компьютером пока допускает ошибки, а привычные человеку действия могут вызывать затруднения. Вместе с обновлением Sonnet компания объявила Claude 3.5 Haiku, выпуск которой планировался позднее. Доступный эксперимент и будущая модель были разными частями одного анонса.
