Вы когда-нибудь слышали об искусственном интеллекте, клонирующем голос? Если нет, то позвольте мне рассказать вам все об этом. Эта передовая технология использует искусственный интеллект для создания голоса, который звучит идентично голосу настоящего человека, имитируя все, от того, как он произносит слоги до интонации. Это не похоже на синтез речи, когда вместо речи используются предварительно определенные голоса. Обе эти технологии часто используются вместе. Если у вас есть голосовой клон ИИ, вы можете заставить его говорить что угодно на любом языке и с любыми эмоциями. Потенциал этой технологии ошеломляет, и правительства по всему миру все еще разрабатывают лучшие законы и правила для ее безопасного использования.
Существует множество приложений для клонирования голоса с помощью ИИ, которые могут клонировать ваш голос или голос других знаменитостей и персонажей и создавать песни с синтезированным голосом. Большинство этих приложений используют две популярные модели клонирования голоса в качестве основы: So-vits-SVC и RVC. Но вместо этих приложений вы можете попробовать использовать модель RVC, которую можно запустить в Google Colab. Весь процесс прост, легок и быстр, и вам не нужен какой-либо предварительный опыт программирования. Давайте вместе выполним шаги, чтобы создать несколько песен.
Предварительное условие: убедитесь, что вы понимаете, как использовать Google Colab.
Как клонировать голос с помощью ИИ?
Шаг 1: Нажмите на эту ссылку, чтобы получить доступ к Google Colab.
Шаг 2: Запустите первую ячейку и щелкните любой из URL-адресов внизу. Я рекомендую использовать общедоступный URL-адрес, который является вторым предоставленным URL-адресом.
Шаг 3: Загрузите предварительно обученную модель голоса по вашему выбору с веб-сайта. Вы можете найти предварительно обученные модели различных знаменитостей или вымышленных персонажей здесь.
Шаг 4: Выберите песню, которую хотите воссоздать, и отделите вокал и фоновую музыку от песни. Для этого вы можете использовать этот сайт https://x-minus.pro/ai.
Шаг 5: Выберите модель голоса, которую вы загрузили ранее, и загрузите вокал песни. Нажмите «Конвертировать», чтобы воссоздать песню с выбранным вами голосом. Через несколько минут песня с клонированным голосом создана!
Шаг 6: Объедините этот вокальный саундтрек и фоновую музыку, и вы получите новую воссозданную песню.
Я попытался клонировать голос Гомера Симпсона и воссоздать с его помощью песню. Послушать его можно здесь. (И не забудьте оставить комментарий, чтобы сообщить мне, какие голоса и песни вы хотите услышать!)
Как тренировать собственную голосовую модель?
Но подождите, это еще не все! Вы даже можете обучить свою собственную голосовую модель ИИ! Это очень легко сделать, но это занимает много времени, так как ИИ требуется значительное количество времени, чтобы выучить ваш голос и обучить модель.
Шаг 1: Соберите только тот вокал, который хотите клонировать. Например, если вы хотите клонировать свой собственный голос, запишите свой голос, чтобы создать набор данных. Чем больше у вас данных, тем лучше, так как модель ИИ может лучше учиться с большим набором данных. Убедитесь, что источники чистые и без фоновых шумов. Избегайте дублирования копий, так как это может привести к переоснащению, снижающему производительность результирующей голосовой модели.
Шаг 2: Загрузите набор данных в модель RVC и нажимайте кнопки с 1 по 5 после завершения каждого шага. Затем загрузите обученную модель и заархивируйте файлы. Загрузите zip-файл на общий диск, например Google Диск. Наконец, повторите шаги из раздела «Как клонировать голос с помощью ИИ?» чтобы воссоздать песни с вашей собственной моделью голоса.
Просто совет: не забудьте сменить учетную запись Google, потому что вы можете достичь дневного лимита использования графического процессора. Всего у вас есть только 4 часа бесплатного использования графического процессора. Время восстановления графического процессора Google Colab может варьироваться от 30 минут до 12 часов или от 12 часов до 5 дней и т. д. Предполагается, что бесплатная версия работает 12 часов, но это никогда не бывает точно. Возможно, вы захотите приобрести какой-нибудь вычислительный блок у Google, минимальная цена которого составляет всего 10 долларов США.
И так, чего же ты ждешь? Давайте попробуем воссоздать некоторые песни, клонируя голоса с помощью простых шагов, упомянутых выше! Хотя у публики все еще есть опасения по поводу клонирования голоса, это все еще интересная технология для экспериментов. Слушайте каверы AI здесь!
