DeepMind представила агента ИИ, способного выполнять задачи в незнакомых 3D-играх

Компания Google DeepMind продемонстрировала нового агента искусственного интеллекта под названием SIMA (Scalable Instructable Multiworld Agent), который может понимать и выполнять задачи в 3D-играх на основе инструкций на естественном языке.Новая разработка DeepMind впервые показала способность ИИ следовать командам в широком спектре игровых миров и окружений, с которыми он ранее не сталкивался.

Для обучения SIMA использовались девять коммерческих игр, включая No Man's Sky, Teardown, Valheim и Goat Simulator 3.Исследователи записывали действия игроков с клавиатурой и мышью, чтобы обучить SIMA воспринимать указания на естественном языке и соответствующим образом управлять игровым персонажем.

Агент может выполнять задачи разного уровня сложности — от навигации до взаимодействия с объектами и пользовательским интерфейсом.В тестах SIMA продемонстрировала способность эффективно обобщать опыт, полученный в одних играх, на другие незнакомые среды.