Сайт дня: сочиняйте Lo-Fi мелодии с помощью нейросетей

У серии знаменитых стримов lofi hip hop radio появился конкурент — сайт, который позволяет не просто слушать музыку, но и изменять ее под настроение, используя нейросети. Называется разработка Lo-Fi Player.

Сайт запустили сотрудники Google Magneta — исследовательского проекта, изучающего роль машинного обучения в искусстве и музыке. О ходе разработки команда написала в блоге Magneta.

Lo-Fi Player представляет собой набор инструментов для создания битов, но с интерфейсом в виде комнаты. В создании музыки задействован весь интерьер: можно нажать на гитару или клавишные и настроить их звучание, можно нажать на окно и выбрать фоновой шум (волны, дождь, люди и т.д.), а еще настроить скорость битов, громкость и другие параметры — для этого нужно будет “переместиться” за стол.

Главный инструмент комнаты — телевизор, за которым скрывается нейросеть MusicVAE. С помощью нее, пишут авторы, можно создавать новые мелодии, комбинируя между собой старые. Это как мобильное приложение, где можно «соединить» свое лицо с лицом знаменитости и посмотреть, какой бы у вас родился ребенок.

Еще одна нейросеть спрятана в радиоприемнике — это алгоритм MelodyRNN, который генерирует случайную мелодию. Другие важные инструменты — будильник (биты) и лампа (стоп-сигнал).

Сайт можно запускать как телефоне, так и на десктопе, но второй вариант разработчики называют более предпочтительным. У сайта также есть стрим на ютубе, которым зрители управляют вместе, отправляя команды через чат.