ElevenLabs выпустила Eleven v4 и Eleven v4 Turbo. Для меня это абсолютный лидер во всём, что связано с генерацией голосов. Очень качественно, дорого — и этот анонс хорошо показывает, за что здесь платят.

Главное в новой версии: голосом можно управлять как исполнением. Описать словами, как произнести реплику, задать эмоцию, темп или акцент. Добавить смех, шёпот и звуковые эффекты. По данным компании, модель лучше понимает контекст и удерживает характер голоса: это важно для длинной озвучки, аудиокниг и диалогов нескольких персонажей.

Обе модели поддерживают более 90 языков. Один и тот же голос можно перенести в другой язык, сохранив его узнаваемость и получив местный акцент. Для быстрого клонирования достаточно 10 секунд записи; для более точного результата есть профессиональное клонирование. Это большие возможности для дубляжа, образовательных материалов и проектов, которым нужен собственный узнаваемый голос.

Eleven v4 Turbo рассчитана на разговорных агентов. Компания заявляет медианное время до начала речи около 150 мс без учёта сетевой задержки. Такая скорость вместе с управлением интонацией особенно интересна там, где агент должен поддерживать живой разговор: в поддержке, обучении или игре.

Модели уже доступны в ElevenCreative, ElevenAgents и через API. В анонсе на Reddit компания также объявила стартовую скидку на две недели: $22 за миллион символов для v4 и $11 для Turbo. Это временные условия, а не постоянный тариф.

Посмотрите видео со звуком. В случае голосовых моделей разницу в интонации полезнее услышать, чем прочитать о ней.

Для меня главный минус остаётся прежним: для серьёзных проектов в России ElevenLabs практически недоступен. Компания прямо ограничивает доступ из России. Для личных экспериментов я ещё рассматриваю такие инструменты, но строить на них рабочий проект здесь не стал бы. Качество выдающееся; возможность надёжно использовать его в своём проекте — отдельный вопрос.

Следующий шаг

Fish Audio S2-Pro — локальное клонирование голоса и синтез речи

Если выбираете голосовую модель для контента или агента, можно обсудить качество, стоимость и доступность на вашем сценарии.

Если захотите обсудить, как это применить у себя или в команде — пишите в Telegram @pimenov