ИИ-кавер на песню: как перепеть трек другим голосом или своим

Хочется услышать свою песню в женском и мужском исполнении, показать демо в другом тембре или просто спеть любимый трек «своим» голосом, не заходя в студию? ИИ-кавер не пересочиняет песню: нейросеть заново поёт её вокальную партию, а ноты, ритм и аранжировка остаются прежними. Меняется только голос.

Послушайте: оригинал и кавер

Обе песни для примеров написала наша нейросеть MiniMax Music. Первая — поп-песня «Лето в голове» с женским вокалом, её перепели баритоном.

Вторая — акустическая баллада «Stay a Little Longer» с мужским вокалом, которую спел женский альт.

Включите оригинал и кавер по очереди с одного и того же места: фразы начинаются и заканчиваются в те же доли, гитара и ударные — те же самые. Другим стал только тот, кто поёт. Поэтому кавер можно поставить в тот же видеоролик или плейлист вместо оригинала, и ничего не придётся сдвигать.

Как это работает

Сначала Demucs отделяет вокал от инструментала. Затем модель преобразования певческого голоса YingMusic перепевает вокальную партию выбранным голосом — те же ноты в том же ритме. Новый вокал сводится обратно с минусовкой, и получается готовый трек в MP3.

Какой голос выбрать

Все шесть голосов созданы нейросетью, каждый можно послушать кнопкой «Послушать» до запуска. Голосов известных певцов здесь нет.

Как сделать кавер: пошагово

1. Откройте «ИИ-кавер» в разделе «Аудио» и загрузите песню — аудио или видео от 10 секунд до 6 минут.
2. Выберите голос из шести или «Мой голос». Для своего загрузите запись на 8–60 секунд без музыки — лучше всего пение, но подойдёт и речь — и отметьте «Это мой голос, или у меня есть согласие этого человека».
3. Настройте сведение: «Громкость вокала» — «Тише», «Обычная» или «Громче», «Реверберация» — «Без неё», «Лёгкая» или «Зал».
4. По желанию впишите название и включите «Обложку» — нейросеть нарисует квадратную картинку по тексту и настроению песни и встроит её в MP3.
5. Отметьте «У меня есть права на эту песню, или кавер нужен только для личного прослушивания» и нажмите «Сделать кавер».
6. Сравните результат с оригиналом прямо в окне инструмента и скачайте MP3.

Как записать свой голос для кавера

• Хватит 8–60 секунд. Лучше всего — спеть куплет или припев любой песни, но подойдёт и спокойная речь.
• Только голос, без музыки и минусовки на фоне: нейросеть должна услышать ваш тембр, а не аккомпанемент.
• Запишитесь в тихой комнате, держите телефон в 15–20 сантиметрах ото рта, не включайте эффекты и автотюн.
• В записи должен быть один человек. Если поёте вдвоём, запишите каждого отдельно.

Для чего делают ИИ-кавер

• Вторая партия для дуэта. Написали песню для мужского голоса — послушайте, как прозвучит женская версия, прежде чем искать исполнительницу.
• Чистое демо. Черновик, напетый под гитару, превращается в ровный вокал баритоном или тенором, который не стыдно отправить группе.
• Любимая песня вашим голосом — для себя.
• Песня, сделанная нейросетью. Если сгенерированный трек нравится, а голос — нет, поменяйте голос и оставьте аранжировку.
• Звук из видео. Загрузите MP4 с выступлением — получите кавер в MP3, при желании с обложкой.

Чей голос и чьи песни можно использовать

Клонировать можно только свой голос или голос человека, который на это согласился, — перед запуском это нужно подтвердить. Песни — свои, те, на которые у вас есть права, или любые, если кавер нужен только для личного прослушивания. Прежде чем выкладывать кавер на чужую песню, получите разрешение правообладателя.

Сколько стоит

Цена зависит от длины песни и видна до запуска. Если кавер не получится, кредиты вернутся.