Компания анонсировала tools для синтеза речи под видеоряд
Разработчик видеогенератора выпустил специализированный набор tools для синхеза речи, обученный синхронизировать голос с движениями рта персонажа на видео. Система анализирует фонемы текста и подстраивает промпты видеогенератора, чтобы движения персонажа соответствовали произнесённым словам.
Tools поддерживают множество языков, включая русский, и позволяют задавать характеристики голоса: пол, возраст, эмоциональный тон. Генерация происходит в один клик без необходимости вручную подправлять синхронизацию в видеоредакторе.
Интеграция в рабочий процесс
Инструмент встроен в облачную платформу видеогенератора и работает через API для интеграции в сторонние приложения. Цена использования рассчитывается по количеству сгенерированных минут озвучки.
Агентства по созданию контента уже вводят tools в свои рабочие процессы для производства видеороликов за дни вместо недель. Синтез речи работает быстрее реального времени, что позволяет экспортировать готовое видео без задержек.
Компания планирует добавить поддержку кастомных голосов на основе образца речи клиента в следующем обновлении.