Синхронизирует движения губ в видео с вашим загруженным аудио, чтобы персонаж выглядел так, будто говорит именно этот текст. Цена зависит от модели: Lipsync 2 - 10 ₽/сек, Lipsync 2 Pro - 15 ₽/сек.
Sync Lipsync 2.0 - нейросеть для синхронизации губ в видео по загруженному аудио: вы берёте ролик с человеком (или персонажем) и подставляете новый звук, а модель подгоняет артикуляцию так, чтобы речь выглядела правдоподобно.
По заявлениям создателей, Lipsync 2.0 работает «из коробки» (zero-shot - без отдельного обучения под конкретного человека), старается сохранять индивидуальную манеру речи и подходит для разных типов видео: живые съёмки, анимация и AI-персонажи. Также у них есть Pro-версия, которая рассчитана на более высокий уровень детализации лица (например, зубы, борода, мелкие черты) и лучше подходит для крупных планов.
Вы загружаете:
Дальше нейросеть анализирует звук (грубо говоря, какие звуки и в каком ритме произносятся) и перерисовывает движения рта так, чтобы они совпали с речью. При этом она старается не «сломать» остальное лицо и не менять человека до неузнаваемости.