Начнем с того, что Vozo в дубляже видео использует технологию Elevenlabs, которая лучше в синтезе и клонировании голосов, и свою для синхронизации губ - Vozo LipREAL, чего пока не умеет Elevenlabs.

Изначально, в Elevenlabs - основной фокус именно на создании и синтезе речи с высокой естественностью, а еще на возможности клонировать голос из короткого 30-секундного отрывка. Еще сервис предпочитают из-за возможности использовать API для интеграции с приложениями. Подробнее про ElevenLabs в этом посте.

А в Vozo основной фокус на видеоконтент (перевод, дубляж, синхронизация губ), а еще там есть генерация "говорящих" фотографий и коротких видео. Хотя Vozo так же может клонировать голоса, не без участия технологии ElevenLabs. Но именно для генерации голосов для более чистого результата рекомендуют все же Elevenlabs

Что лучше использовать и для чего:

Если вам нужно работать с видео (перевод, дубляж, и особенно синхронизация губ), то Vozo AI предлагает специализированные функции для видео

• $19 в месяц за Премиум-план (синхронизация губ для 2 лиц, удаление водяных знаков, 120 минут видео) — это выгодно в контексте видео-контента. А клонирование и дубляж уже сопутствующие к видео.

Если ваша задача связана с синтезом речи или клонированием голосов, то ElevenLabs будет дешевле на старте и более заточен именно на это:

• $5 в месяц за Starter-план даёт 30 000 кредитов, этого достаточно для синтеза речи и создания базовых голосов. За 22$ дается 100 минут  высококачественного Text to Speech

Вот что классно в этих двух платформах:

• Обширный список доступных языков, включая русский

• Попробовать можно бесплатно, на старте дается определенное количество кредитов, которые можно потратить по своему усмотрению, и заодно протестить:

В Vozo вам дается 30 бесплатных кредитов, которых хватит примерно на 3 минуты для перевода и дубляжа - но даются они на 7 дней. В ElevenLabs бесплатно ежемесячно дается 10 000 кредитов в месяц, это 10 минут высококачественного синтеза речи. Хотя и там, и там, кредиты можно потратить на свое усмотрение.

Как использовать:

Во вкладке слева Voices нажимаем кнопку Add a new voice. Затем выбираем Voice Design, описываем, каким должен быть голос персонажа, и пишем текст для озвучки, как я показала на видео.

Текст должен быть не короче 100 слов и не длиннее 1000 слов.

Мои рекомендации:

В самом начале создания голоса я вставила текст в 700 символов, в итоге возникла ошибка, а кредиты списались, я повторила процедуру - и итог тоже повторился 😁 Поэтому, чтобы не тратить свои нервы и кредиты, для начала используйте фразу от 100-150 слов. Так голос спокойно и без ошибок сгенерируется в трех вариантах, из которых вам надо будет выбрать понравившийся. А вот после того, как вы этот голос сохранили, можете использовать уже на длинных текстах.

Кстати, видео я тоже озвучила с помощью ElevenLabs - быстро клонировала свой голос даже не в профессиональном режиме, а на самом минимальном тарифе от 5$

Как бесплатно использовать Elevenlabs

Бесплатно на старте ElevenLabs дают 10 000 кредитов, которые вы можете использовать по своему усмотрению, так как там есть и дубляж видео на разные языки, и синтез голоса, и клонирование голоса, в общем, рекомендую ознакомиться с сервисом, в этом посте я сравнила его с другими сервисами.

Чтобы работать с ElevenLabs необходимо поменять свой ip, if you know what I mean ))

Записала для вас видео сравнение двух нейросетей в клонировании голосов. Про ElevenLabs  вы уже в курсе. Появилась новая нейросеть.

Новая нейросеть MARS5 доступна бесплатно в GitHub, либо либо на платформе Camb AI, где на старте дается 5 минут.  На самой платформе еще есть видеодубляж с переводом, и это тоже входит в бесплатные 5 минут. 

Политика как и у ElevenLabs - те каждый месяц дают бесплатно 10к знаков (10 мин аудио), которые можно потратить на дубляж с переводом, перевести текст в аудио, создать голоса, а звуковые эффекты и вовсе пока бесплатны.

Клонирование голоса:

Для того, чтобы клонировать голос, загружать аудио нужно в формате .wav, длина от 90 секунд до 10 минут.

Бесплатно дает загрузить 2 голоса для клонирования. Голосами можно озвучить до 400 символов текста за раз.

Работает со 140 языками, включая русский. 

Намеренно не стала сравнивать с Whisper Speech и  PlayHT, так как они не поддерживают русский язык. 

Их возможности представлены в этих постах:

Бесплатное клонирование с Whisper Speech   

Клонирование с PlayHT

Что скажете? Кто пробовал MARS5, у вас какие результаты?

Хотите узнавать первыми о полезных сервисах с искусственным интеллектом для работы, учебы и облегчения жизни? Подпиcывайтесь на мой телеграм канал НейроProfit, там я рассказываю, как можно использовать нейросети для бизнеса.

ElevenLabs выпустили новую функцию AI Voice Changer, теперь можно преобразовывать Speech to Speech (речь в речь) и превращать свой голос в другого персонажа, можно управлять его эмоциями и подачей. Сохраняется тембр, тайминги, благодаря чему синтезированная речь звучит ещё реалистичнее, имитируя ваше произношение.

Ваш голос можно преобразовать в любой другой на 29 языках, в том числе на русском. Достаточно будет записи вашей речи и образца чужого голоса.

Легко можно создать собственные AI голоса для своих видео, подкастов, игр и многого другого одним щелчком мыши.

Интересно, можно ли будет продать эти сгенерированные голоса? А так, видно вливание $80M инвестиций, ИИ-стартап развивается стремительно, недаром ее недавно оценили в $1,1 млрд.

Хотите быть в курсе полезных ии сервисов для работы, учебы и облегчения жизни? Подпишитесь на мой канал в Telegram НейроProfit, там я рассказываю о том, как зарабатывать с помощью нейросетей и использовать ии-сервисы для бизнеса 😉

В одном из прошлых постов я писала, что ElevenLabs анонсировали возможность заработать пользователям на клонировании голоса. И вот теперь все желающие могут загрузить свой голос и получать деньги за его использование.

Как работает:

Пользователь загружает 30 минут аудио голоса, добавляет описание, затем назначает цену и указывает реквизиты.

Голосом будет озвучиваться реклама и прочий контент, а взамен обещают пассивный доход.

Подать заявку можно здесь

Вам может быть интересно:

Подробнее про ElevenLabs и сравнения с Resemble

Про обновления и русский язык

Про возможность заработка на созданных голосах и инновации

Про дубляж видео на русский и сравнение с HeyGen

Хотите быть в курсе полезных ии сервисов для работы, учебы и облегчения жизни? Подпишитесь на мой канал в Telegram НейроProfit, там я рассказываю о том, как зарабатывать с помощью нейросетей и использовать ии-сервисы для бизнеса 😉