Нейросети для генерации звука и музыки — тестируем лучшие

Редакция «Текстерры»

Мы сравнивали много сервисов — выясняли, какой переводчик лучше всего, тестировали нейросети для расшифровки аудио и выбирали нейросети для создания презентаций. В этой статье собрали лучшие нейросети для генерации звуков и музыки и, конечно, попробовали их на практике.

Интерфейс у всех сервисов — на английском языке. Оплатить из России напрямую их нельзя, но у всех есть полезные бесплатные функции.

Mubert

Есть ли бесплатная версия: да, в ней доступны до 25 треков в месяц.

Стоимость: от 14 долларов в месяц — можно генерировать до 500 треков лучшего качества, чем в бесплатной версии, а также музыка будет без водяного знака. Чем дороже тариф — тем больше возможностей. Например, в тарифе для агентств за 199 долларов — собственный аккаунт-менеджер и возможность монетизации треков.

Здесь можно искать музыку по текстовому референсу, генерировать по жанрам и настроениям и текстовому запросу.

Чтобы создать трек, нажмите «Generate a track now»:

Первый можно создать без регистрации. Введите запрос на английском или выберите из готовых треков. Также можно генерировать по жанру и настроению:

Я ввела «music for a movie about a haunted house», чтобы посмотреть, как сервис справится с текстовым запросом («создать музыку для фильма про дом с привидениями»).

Длительность трека — 45 секунд (минимальная — 5 секунд, максимальная — 25 минут). В течение пары минут трек создается, дальше его нужно скачать, а вот для этого нужно создать аккаунт:

Регистрируемся с Google-аккаунтом, наш трек будет во вкладке «My downloads». Можно послушать его здесь или скачать. Для скачивания нужно указать, где он будет опубликован.

Затем трек можно скачать. Пример трека для использования в фильме о доме с привидениями:

Получилось очень хорошо и довольно жутко. Еще больше примеров работы сервиса — на главной странице.

Suno

Есть ли бесплатная версия: да, в нее входят 50 кредитов ежедневно (на них можно сгенерировать 10 песен); чтобы генерировать песни, нужно ждать своей очереди; можно генерировать 2 песни одновременно.

Стоимость: от 10 долларов в месяц, в это входят 2 500 кредитов, на которые можно создать до 500 песен. Чем дороже подписка — тем больше кредитов, одновременно запущенных задач, а также тем быстрее генерируется трек.

Регистрируемся с почтой или Google-аккаунтом. Генерация работает как в Mubert — по текстовому описанию — и по жанру / настроению.

Попробуем сгенерировать по тексту:

Сервис сгенерировал не только песню в нужном жанре (о кошках, которые играют под солнцем) со связными словами, но еще и обложку к треку:

Послушайте результат. От пения человека эту музыку можно и не отличить, а еще в песне есть смысл (см. слова справа).

Еще здесь есть расширенные настройки, которые позволяют добавить свои слова к тексту. Это полезно, если у вас уже есть стихи, но нет музыки к ним:

Сервис может даже сгенерировать стихи, но, конечно, только на английском. Сделаем это, выберем в качестве жанра электронную музыку и начнем генерацию. Сервис сам предложил название для трека — Nighttime Wonders, потому что стихи про красоту ночного времени.

Вот как звучит музыка:

Это пока что лучший сервис в подборке, в том числе потому, что генерация музыки такого качества была очень простой и заняла всего пару минут в обоих случаях.

Soundful

Есть ли бесплатная версия: да, в нее входит безлимитная генерация треков, 25+ стилей музыки, но лишь одно скачивание в месяц.

Стоимость: от 5 долларов в месяц — можно скачивать 100 и более сгенерированных треков в месяц, есть более 150 музыкальных стилей и много премиум-контента.

Чтобы начать использовать сервис, нужно зайти через почту, Google-аккаунт или Soundcloud.

Дальше нужно выбрать свою роль:

И затем — предпочитаемые жанры музыки. После этого мы попадем на страницу сервиса, где сможем искать среди уже созданной музыки:

Чтобы сгенерировать трек, нужно перейти в любой жанр и нажать «Create»:

Там можно поменять жанр, выбрать поджанр или настроение, а также настроить минорность / мажорность трека, скорость и задать ему название:

Дальше, когда все настроено, нужно нажать «Create preview». Трек создастся, дальше его можно будет послушать прямо в сервисе и сохранить на устройство.

Рендеринг для сохранения занимает до 10 минут:

Вот так звучит финальный вариант. Это трек без слов в «пляжном настроении» и мажорном ключе:

Soundraw

Есть ли бесплатная версия: да, можно генерировать неограниченное количество треков, но сохранять можно только после оплаты

Стоимость: от 17 долларов в месяц за музыку, права на которую будут принадлежать вам; неограниченное количество загрузок.

Как и в сервисах выше — регистрируемся (доступен вход через Google-аккаунт). Генерация здесь тоже заключается в выборе параметров нашего трека, как у предыдущего инструмента.

Сначала выбираем направление музыки:

Дальше нужно выбрать настроение, тему, длительность, темп и инструменты, которые будут участвовать в треке:

Все это сужает список мини-композиций, которые видны на экране под настройками:

Нажав на композицию, можно отредактировать ее — в этом и заключается работа с треками в сервисе.

Вот такая рок-композиция в настроении «Dark» и с темой «Drama» у нас получилась. Можем прямо во время воспроизведения трека менять разные звуки, длительность, ключ.

А чтобы ее скачать, придется заплатить. Поэтому показываем вам результат в виде записи экрана.

Boomy

Есть ли бесплатная версия: да; в нее входит неограниченное количество генераций, 25 сохранений в личный кабинет и стандартные инструменты. Загрузки в бесплатную версию не входят.

Стоимость: от 10 долларов в месяц за полноценную работу с сервисом: можно создавать треки, скачивать их и выкладывать на продажу.

Это сервис для тех, кто хочет создавать музыку и прямо тут же ее монетизировать — можно выпускать треки без продюсера и зарабатывать на том, что ее будут покупать, в том числе для коммерческих целей.

Регистрируемся через Google-аккаунт, выбираем жанр:

Добавляем еще жанры:

Получаем музыку, которую можем редактировать:

Сохранить материал не получится — покажем в видео, что получилось. Это хип-хоп-бит, на который можно наложить свой голос:

Продать что-либо тоже не получится, если не купить платный аккаунт за 10 долларов в месяц.

Melobytes

Есть ли бесплатная версия: да, в нее входят все стандартные функции, просто нужно ждать своей очереди на генерацию или загрузку.

Стоимость: от 9 долларов в месяц — не нужно ждать очередь, нет водяного знака сервиса и так далее.

Зарегистрироваться можно только с почтой.

Здесь есть несколько интересных инструментов — генератор серии аккордов, генератор музыки в стиле эмбиент, генератор песни на день рождения и даже генератор звука музыкальной подвески (та, что приятно звучит от дуновения ветра).

Все эти инструменты есть во вкладке All Apps:

Нас интересуют первые два — в принципе, все остальные инструменты работают примерно одинаково и у них практически одинаковые настройки, которые нужно выставить: длительность, инструменты, скорость и так далее.

Пишем текстовое описание прогрессии аккордов, которая нам нужна. Дальше будет огромное количество настроек — музыкальные инструменты, количество повторов, длительность трека. Для первого раза все это не нужно — просто задаем промпт, нажимаем «Create» и получаем прогрессию аккордов и ее же в виде нот:

Все это можно скачать и вот как это звучит:

То же самое с генератором музыки в стиле эмбиент, только этот инструмент новый и настроек у него пока всего три — расширенных нет. Задаем настройки и нажимаем Generate:

Вот что получится:

WavTool

Есть ли бесплатная версия: бесплатны все основные функции, поддержка плагинов, чатбот для работы с музыкой, облачные сохранения и экспорт в WAV.

Стоимость: от 4 долларов в месяц: все основные функции и расширенные, экспорт в разных форматах.

Это очень сложный редактор треков, с которым справятся только те, кто умеет работать с инструментами создания музыки.

Обычный человек разберется только в том, как зарегистрироваться в сервисе, выбрать нужный инструмент:

Найти чат-бота:

Написать к нему запрос:

И получить результат. Я попросила сгенерировать серию аккордов, и сервис мне ее предложил:

Сервис будет раскладывать всю музыку в поле внизу, откуда ей можно управлять, как программах для сведения музыки, добавлять голос и партии других инструментов.

Wavtool подходит для профессиональных музыкантов — для генерации простой музыки по текстовому описанию есть Suno и Mubert.

See-2-Sound

Стоимость: эта нейросеть пока что бесплатна.

Эта нейросеть сильно отличается от всех представленных в обзоре — работа с ней происходит через картинки и видео. Сервис создает не столько музыку, сколько звуковое окружение — может сгенерировать шум поезда, хруст снега и прочее:

Модель машинного обучения не только создает подходящую дорожку, но и расставляет источники звука в пространстве для создания эффекта присутствия:

Примеры есть на сайте сети, а попробовать ее на собственном наборе данных можно в демо-версиии на платформе Huggingface.

Возьмите первую картинку из предложенных нейросетью и попробуйте сгенерировать аудио:

Если выйти со страницы или свернуть ее, загрузка выдаст ошибку, особенно на мобильных устройствах. Снова попробовать не получится — для тех, кто не зарегистрирован, доступна только одна попытка. Через Google-аккаунт зарегистрироваться нельзя, нужно через почту.

Генерация достаточно долгая — в некоторых случаях до 5-10 минут. Если обновить страницу, будет считаться, что генерация состоялась, и для новой попытки нужно будет ждать несколько минут часов. У меня так и не получилось ничего создать, если у вас тоже так — остается только довольствоваться примерами с сайта сервиса.

Нейросети для генерации музыки: что выбрать

Собрали сервисы в таблицу, где кратко указали, для чего каждая подходит. Так вам проще будет выбрать подходящий инструмент. Расположили их от самой простой к самой сложной.

Читайте также:

Где найти музыку и звуки для видео в соцсетях – 4 неочевидных источника

Как быстро сделать рекламный креатив: тест нейросети Яндекса

100 лучших нейросетей в 2024 году