Nvidia представила Fugatto — ИИ, создающий звуки, которых раньше не существовало

Компания Nvidia заявила, что её новый инструмент для редактирования аудио на базе ИИ, названный Fugatto, способен создавать «звуки, которых никто раньше не слышал», например, трубу, издающую звуки, похожие на мяуканье.

Fugatto может генерировать музыку, звуки и речь, основываясь на текстовых и аудио запросах, даже если ранее не обучался на подобных данных.На представленном Nvidia видео инструмент демонстрирует возможность создавать песни по нестандартным запросам, например: «Создать саксофон, который воет, лает, а затем переходит в электронную музыку с собачьим лаем».Nvidia также привела другие примеры возможностей Fugatto, включая генерацию уникальных звуковых эффектов по описанию, таких как:«Глубокие, грохочущие басовые пульсации с прерывистыми, высокими цифровыми звуками, напоминающими пробуждение гигантской разумной машины».Инструмент может менять голос человека, трансформируя акцент или придавая голосу разные эмоции, например, гнев или спокойствие.

Fugatto также способен редактировать музыку: изолировать вокал в песне, добавлять инструменты или изменять мелодию, заменяя, например, звук пианино на оперное пение.Согласно отчету, сопровождающей анонс, Fugatto обучался на огромном объёме данных, включая библиотеку звуковых эффектов BBC.