Sync 2.0 Pro Lip-sync
референс→відеоСильні сторони
- НАЙТОЧНІША синхронізація губ на ЗНЯТОМУ відео — студійний рівень
- Ловить стиль мовця з самого відео, без окремого навчання — дивиться на вхід і будує уявлення про людину в русі
- Працює до 4K, а обличчя чистить дифузійним збільшенням, а не старим способом — борода й рот виходять чистими
- Витримує більше обличчя в кадрі — до близько 350 пікселів, без втрати якості
- Підходить і для ігрового кадру, і для намальованого, і для згенерованого відео
Слабкі сторони
- Потребує АКТИВНОЇ мови на вході: якщо людина в кадрі мовчить, губи можуть узагалі не ворухнутися
- Профіль або частково закрите обличчя дає слабкий результат
- Повільний — приблизно вдвічі повільніший за полегшений варіант
- Дорогий
Не використовуй для
- Не подавай кадр, у якому людина мовчить або просто дивиться
- Не подавай різкий профіль чи обличчя за рукою, мікрофоном, волоссям
- Не використовуй його, коли маєш лише фото – для цього є інша модель
Типові завдання
- Змусь людину з кліпу сказати інший текст
- Зміни мову того, хто говорить, зі збереженим обличчям
- Виправ репліку без повторної зйомки
- Дубляж ігрового або рекламного кадру