Исследователи из Национального университета Сингапура разработали нейросеть MagicAnimate, которая способна «оживлять» изображения.
По словам создателей, она в значительной мере превосходит по эффективности похожие решения. Для создания анимации MagicAnimate берет исходное изображение и последовательность кадров из библиотеки DensePose.
Затем, с помощью диффузионной модели, генерирует кадры будущей анимации на основе эталонного изображения. Результат «склеивается» в готовый ролик.
Читать на chudo.tech