Нейросети могут создавать звуки тысяч никогда не существовавших инструментов

Одно из подразделений Google смогли научить нейросеть смешивать звуки разных инструментов и получать на выходе тембры совершенно иные звуки, не существующие в природе. Как оказалось, нейросеть смогла не просто перемешать и одновременно выдать звук исходных музыкальных устройств, а создать из них совершенно новое звучание.



В современном мире нейросети давно уже вышли за границы академических лабораторий и проникли в сферу развлечений, вычислительной техники, промышленности и т.д. К примеру, специалисты корпорации Google научились с помощью нейросети создавать новые звуки, не существующие ранее. Для этого системе "скармливают" исходный материал различных инструментов (от арфы до африканских барабанов), которые потом пополняют огромнейшую базу данных NSynth. Всю эту базу система проанализировала на выявление аудиальных характеристик инструментов, преобразующихся в "мозгу" нейросети в многомерные векторы. Далее после недолгих математических вычислений получается новый "инструмент" или смешанные пропорционально по коэффициентам звуки (80% фортепиано и 20% укулеле, к примеру).

Разработчики уверены, что их "детище" сможет найти себе применение среди профессиональных композиторов. В связи с этим была даже создана и опубликована специальная программа для музыкантов на основе данной технологии.