Несколько лет назад Google запустила Magenta – проект, призванный расширить творческий потенциал человечества с помощью искусственного интеллекта. На днях исследовательская группа представила экспериментальный инструмент с открытым кодом, получивший название NSynth Super.
NSynth Super работает на нейросети NSynth, позволяющей генерировать новые, не существовавшие ранее звуки, совмещая воедино звучание совершенно разных инструментов. И NSynth Super стал первым практическим воплощением данной концепции.
По словам научных сотрудников Magenta, девайс не генерирует ноты, а скорее создает новые инструменты (например, с помощью нейросети вы сможете создать гибрид флейты и барабана, органа и гитары, и так далее). Алгоритм NSynth обрабатывает основные характеристики, свойственные звучанию тех или иных инструментов, а затем миксует их в единый и неделимый организм, вместо простого накладывания двух звуковых волн друг на друга.
NSynth Super – это двухмерный тачскрин, с помощью которого пользователь сможет смешивать оттенки звуков, расположенные в различных углах диаграммы на экране. Примерно таким же образом можно получать различные оттенки цветов при работе с цветовым пространством графических редакторов. Прибор совместим с MIDI-клавиатурой, звуковыми станциями и прочими контроллерами.
Пока что Google не планирует выпускать ИИ-синтезатор в продажу. Впрочем, ничто не мешает вам смастерить собственный вариант с помощью Raspberry Pi и инструкций, выложенных на GitHub.