Необходимо сгенерировать музыкальный альбом из 5-7 композиций, а также обложку для него, используя для этой цели нейросетевые подходы
Итоговый альбом оценивается по следующим критериям:
- Звучание (отсутствие шума в звуке, целостность композиций и т.д.)
- Стилевая целостность (по жанру/артисту/и т.д.)
- Использование текста в альбоме и его звучание. Подсказка: для генерации текста с помощью нейросетей можете обратить внимание на эту или эту ссылки, либо использовать любые другие подходы :)
- Обложка к нему. Подсказка: для создания обложки вы можете использовать разные text2image подходы, например подход BigSleep или любой другой
Пример решения для генерации музыки с нуля или как продолжение к уже существующему треку приведен в ноутбуке. В данном бейзлайне для генерации используется модель JukeBox от OpenAI. С помощью данного подхода можно генерировать музыку, основываясь на жанре, исполнителе, тексте и других параметрах.
Подробнее почитать про данный подход можно в блоге или статье, а также посмотреть код можно на официальном гитхабе.
Однако мы вас не ограничиваем в выборе модели и предлагаем самим выбрать любой подход для генерации музыки, который вам интересен!
Сам гитхаб и тестовая композиция лежат в кристофари в папке ai-album, однако вы можете склонировать репозиторий заново, если будете пользоваться другим образом. Ноутбук запускается с нуля, ничего дополнительно делать не нужно. Также не пугайтесь, если первые несколько ячеек будут выполняться 5-15 минут -- это нормально.