HeyGen

HeyGen Voice — это модель синтеза речи от HeyGen. Она поставляется с 10 голосами по умолчанию, или вы можете указать собственный ключ HeyGen, чтобы использовать голосовые клоны из вашего аккаунта. Она передаёт аудио потоком в формате 44.1 kHz моно PCM, с поддержкой 39 языков и до 5,000 символов на запрос.

HeyGen Voice Turbo — это версия HeyGen Voice с более низкой задержкой, модели преобразования текста в речь от HeyGen. Она включает те же 10 голосов по умолчанию, либо вы можете использовать собственный ключ HeyGen, чтобы применять клоны голосов из вашего аккаунта. Она выводит потоковое 44.1 kHz моно PCM аудио, поддерживая 39 языков и до 5,000 символов на запрос.

HeyGen Video — универсальная модель генерации видео от HeyGen. Она создаёт короткие ролики с синтезированным звуком (диалоги, атмосфера и звуковые эффекты) за один вызов, работая с текстовым промптом, с изображения-первого кадра или с набора изображений, видео и аудиореференсов, к которым промпт может напрямую обращаться. Модель ориентирована на короткие деловые видео с высокой динамикой в кадре: брендовые моменты, демонстрации продуктов и оборудования, обучающий и адаптационный контент. Это не аватарный продукт. В отличие от Avatar IV и Video Agent от HeyGen, здесь нет этапа говорящей головы, сценария или синхронизации губ; всю сцену определяют промпт и референсы.

HeyGen: Avatar IV — это модель преобразования изображения в видео, которая оживляет одно фото, превращая его в выразительное видео с говорящей головой и синхронизацией губ. Вместо простого подбора формы губ под слова, она интерпретирует вокальный тон, ритм и эмоции аудио, чтобы управлять движениями головы, мимикой и жестами, создавая результат с разрешением до 1080p. Озвучка берётся из одного из двух источников: текстовый сценарий, который модель озвучивает с помощью синтеза речи HeyGen, либо предоставленная аудиодорожка, под которую изображение синхронизирует губы напрямую. Сквозные параметры позволяют выбрать голос, настроить параметры голоса, задать выразительность, указать конкретные движения, заменить или удалить фон, добавить субтитры и задать название видео.