Сотрудники Google, разработали нейросеть, способную комбинировать звуки разных инструментов. Новая NSynth способна смешивать звучание от еврейских скрипок до африканских ударных инструментов — балафонов. Подробности и примеры звучаний команда разместила в блоге компании. Сама технология опубликована на ArXiv.
Эволюция нейронных сетей не стоит на месте. NSynth – разработка подразделения компании Google – группы Magenta. С ее помощью можно получить тембры похожие на исходные, но не являющиеся полным звукоизвлечением из инструмента.
Нейросеть выявляет аудиальные характеристики каждого инструмента, анализируя большую базу данных различных звуков, и получает для каждого инструмента многомерный вектор. Далее она работает со звуками как с математическими объектами – складывает и вычитает, а также комбинирует в различных соотношениях, например, может совместить гавайскую четырёхструнную гитару — укулеле и орган в соотношении 15% к 85%. Или 70% на 30% — как будет угодно.
Нейронные сети давно уже не нонсенс в различных сферах деятельности: они используются в индустрии развлечений, промышленности и медицине, а также в анализе данных. Создатели NSynth надеются, что разработка будет принята профессиональными музыкантами и найдет применение в создании новых произведений и стилей исполнения. С этой целью на сайте компании открыт доступ к описанию и скачиванию программы.
Текст: Екатерина Заикина
Neural Audio Synthesis of Musical Notes with WaveNet Autoencoders by Jesse Engel, Cinjon Resnick, Adam Roberts, Sander Dieleman, Douglas Eck, Karen Simonyan, Mohammad Norouzi
Submitted on 5 Apr 2017
arXiv:1704.01279
Читайте материалы нашего сайта в Facebook, ВКонтакте и канале в Telegram, а также следите за новыми картинками дня в Instagram.
Powered by WPeMatico
