Сегодня в новостях
Об этом же в других СМИ
/ habr.com
Google представила Lumiere — нейросеть для генерации реалистичных видео
Google представила нейросеть Lumiere для генерации коротких реалистичных видео. Для этого используется модель пространственно-временной диффузии (Space-Time-U-Net, STUNet).Lumiere генерирует пятисекундные видеоролики по текстовому описанию.
Главное отличие модели Space-Time-U-Net, которая используется в Lumiere, в том, что она создаёт видео за один проход. Другие нейросети для этого сначала генерируют ключевые кадры, а потом заполняют время между ними.
Из-за этого часто возникает несогласование кадров между собой.Для обучения модели преобразования текста в видео использовали датасет из 30 млн роликов с текстовым описанием.
Читать на habr.comОб этом же в других СМИ
Состоялся релиз инструмента Galileo AI для генерации дизайна интерфейсов habr.com / 3 месяца назад
OpenAI представила новую модель для преобразования текста в видео incrypted.com / 3 месяца назад
OpenAI представила Sora — модель ИИ для преобразования текста в видео gagadget.com / 3 месяца назад
Показать ещё
Сайт imag.one - агрегатор новостей из открытых источников. Источник указан в начале и в конце анонса. Вы можете пожаловаться на новость, если находите её недостоверной.