Luma AI выпустила Dream Machine — нейросеть для генерации видео

Компания Luma AI выпустила нейросеть Dream Machine, предназначенную для генерации коротких роликов. Пользователи уже могут создавать видео, есть бесплатный тариф с ограничением на количество генераций в месяц.Пока нейросеть справляется с роликами продолжительностью до пяти секунд.

Разработчики отмечают, что итоговые материалы получаются плавными и фотореалистичными. Кроме того, Dream Machine называют самой быстрой моделью машинного обучения для создания видео — генерация пятисекундного ролика занимает 120 секунд.Нейросеть работает в режиме Text-to-Video и поддерживает создание роликов в разных стилях и запоминает персонажей, сохраняя их внешний вид на всех кадрах.

Но разработчики отмечают, что в некоторых сценариях Dream Machine может плохо работать или создавать ролики с браком. К примеру, нейросеть не умеет работать с текстом в кадре, а объекты в кадре могут изменять форму.Dream Machine уже доступна пользователям для экспериментов.