TechFusion.ruГаджетыGoogle представила нейронный синтезатор NSynth Super

Google представила нейронный синтезатор NSynth Super

NSynth Super
Екатерина Рыбачёк

Екатерина Рыбачёк

Новостной редактор TechFusion.ru,
гедонист, оптимист,
любитель котиков и технологий
Екатерина Рыбачёк

Команда исследовательского проекта Google Magenta в сотрудничестве с Google Creative Lab создали экспериментальный инструмент, использующий глубокую нейросеть для создания новых звуков

Нейронный синтезатор NSynth был презентован весной прошлого года. Он использует глубокую нейросеть для изучения характеристик аудио и создания совершенно новых звуков. Теперь разработчики представили первый прототип реального устройства для музыкантов NSynth Super.

Необычный музыкальный инструмент с помощью машинного обучения не комбинирует или смешивает звуки, а затем синтезирует совершенно новый звук с использованием акустических качеств оригиналов.

NSynth Super создает музыку из четырех разных источников звука. Он автоматически декодирует 16 определяющих признаков из каждого источника. Потом он интерполирует эти признаки математическими методами и преобразует их в новые звуки, которые имеют акустические качества всех источников.

Полное описание метода работы нейронного синтезатора можно найти в статье Neural Audio Synthesis of Musical Notes with WaveNet Autoencoders на странице Google Research.

На обложке: Прототип NSynth Super
Фото: withgoogle.com