Компания Anthropic представила обновлённую версию своей ИИ-модели Claude 3.5 Sonnet, которая способна управлять приложениями, имитируя действия пользователя. Новое API «Использование компьютера» позволяет модели совершать нажатия клавиш, перемещать курсор и выполнять клики, по сути превращая её в виртуального помощника для автоматизации различных задач.
Этот инструмент доступен в бета-версии и интегрируется с платформами Amazon Bedrock и Vertex AI.Claude 3.5 Sonnet может видеть экран и управлять приложениями на основе данных, предоставленных пользователем.
Это делает его полезным для автоматизации процессов, таких как заполнение форм, обработка писем и других офисных задач. Модель может не только анализировать текст, но и управлять интерфейсами программ.Хотя другие компании, такие как Relay и Adept, разрабатывают похожие технологии, Claude 3.5 отличается точностью и способностью самостоятельно исправлять ошибки.
Читать на habr.com