Генерация музыки с помощью ИИ

2023. Stability AI выпустила ИИ модель для генерации музыки



Stability AI выпустила модель Stable Audio для генерации музыки. Она генерирует аудиозаписи по текстовым запросам. Её обучали на дата-сете из текстовых метаданных и более чем 800 тысяч аудиофайлов с готовыми композициями, звуковыми эффектами и инструментальными партиями общей длительностью свыше 19,5 тысячи часов. Пользователям предлагают три тарифа. Первый — бесплатный: можно генерировать по 20 фрагментов в месяц длиной не более 45 секунд. Профессиональный обойдётся в $11,99 в месяц без учёта налогов и позволит генерировать 500 треков в месяц продолжительностью по полторы минуты. Условия корпоративного тарифа обговариваются в индивидуальном порядке.


2023. ИИ-модель MusicLM от Google сочиняет музыку по текстовому описанию



Google представила систему MusicLM, которая создает музыку в любом жанре по текстовым описаниям. Это не первый музыкальный генератор ИИ — такие проекты как AudioML от Google и Jukebox от OpenAI уже занимались этой темой. MusicLM использует обширную обучающую базу данных из 280 000 часов музыки и умеет писать композиции по абстрактным описаниям. MusicLM может не только комбинировать жанры и инструменты, но и писать треки, используя абстрактные концепции, которые обычно трудно понять компьютерам. В одном из примеров модель создала трек, сочетающий танцевальную музыку с реггетоном, обладающий «космической, потусторонней» мелодией, которая вызывает «чувство трепета и благоговения». В качестве задания может выступать описание картины, еще желаемую композицию можно напеть или просвистеть. В режиме истории можно объединить несколько текстовых описаний для создания диджейского сета или саундтрека.