OmniHuman — оживи фото человека голосом и движением

Что такое OmniHuman

OmniHuman — генеративная модель для видео, созданная компанией ByteDance, которая стоит за TikTok. Она берёт одну-единственную фотографию человека и аудиозапись (речь или песню) и превращает их в видео, где человек с фото говорит или поёт. Движения губ, головы и тела синхронизируются со звуком, так что статичный кадр оживает естественно.

В отличие от моделей, которые просто добавляют движение к фото, OmniHuman нацелен именно на человека и его речь: цель — чтобы губы точно повторяли услышанное, а мимика и жесты выглядели живыми, а не механическими. Поэтому он удобен, когда нужно заставить конкретное фото «заговорить» заданным голосом.

В genkiki.com модель доступна как «OmniHuman (фото → речь)» в режиме Видео из фото — ты загружаешь портрет и аудио, а система возвращает готовое видео.

Версии и возможности в generiram

OmniHuman предлагается как одна модель с ясной задачей: оживить фотографию человека голосом. Ниже — коротко о том, что она делает.

ВариантРежимыДля чего
OmniHuman (фото → речь)Видео из фотоПревращает фото человека и аудиозапись в говорящее или поющее видео с синхроном губ, головы и тела

Видео из фото

Ты подаёшь фотографию человека и аудиозапись. OmniHuman сохраняет внешность с фото и добавляет движение губ в такт речи, а также естественные движения головы и тела. Получается видео, где человек с фотографии будто и правда произносит или поёт поданный звук.

Для чего подходит

  • Оживление портрета — заставь статичное фото заговорить или запеть.
  • Говорящие аватары — создай персонажа или лицо, которое произносит сообщение заданным голосом.
  • Говорящие фотографии — оживи семейный, исторический или продуктовый снимок с человеком.
  • Озвучка статичного кадра — добавь голос и мимику к одному снимку, без камеры и съёмки.

Как начать

Открой ИИ-студию genkiki.com, выбери OmniHuman (фото → речь), загрузи чёткое фото человека и ту аудиозапись, которую хочешь услышать, и запусти генерацию. Для лучшего результата возьми фото, где лицо хорошо видно и освещено, и чистую запись без сильного фонового шума.

Модели OmniHuman — подробно

Кто для чего годится, где слаб и для чего его лучше не брать.

OmniHuman (фото → речь)

референсвидео
Пропорции: 1:1, 9:16, 16:9 Длительности: 5 сек, 10 сек Цена: 322 кредитов

Силён в

  • Из ОДНОГО фото и звука делает видео, где человек говорит или поёт — без съёмки
  • Двигает не только губы: считывает ЭМОЦИЮ в звуке и играет всем телом — взволнованная речь даёт другие жесты, чем тихий исповедальный тон
  • Внутри работают ДВА ума: один разбирает смысл звука и планирует жест, второй рисует его кадр за кадром
  • Пение предусмотрено — паузы, смена настроения и сценическое движение
  • Выдерживает несколько героев в кадре
  • Кроме звука принимает и короткий текст — им задаёшь движение камеры, жест или настроение

Слаб в

  • Длина зависит от качества: до 30 секунд звука при 1080p и до 60 секунд при 720p
  • Лучше всего он до 15 секунд — дальше результат начинает разваливаться
  • Сцена СТАТИЧНАЯ: фон не меняется, камера стоит, человек остаётся примерно на месте
  • Результат целиком зависит от фото — из плохого фото выйдет плохое видео
  • Быстрая рваная речь даёт ему меньше времени, чтобы жест улёгся

Не используй для

  • Не подавай фото в профиль, с закрытым лицом или в очках, которые прячут глаза
  • Не давай ему длинную запись целиком — режь её на куски меньше 15 секунд
  • Не используй, когда у тебя уже есть снятое видео — там синхрон губ точнее

Типичные задачи

  • Говорящий аватар из одного фото
  • Поющий портрет
  • Обращение по готовому тексту и голосу
  • Оживший архивный или семейный портрет
  • Ведущий для короткого видео, без съёмочного дня

Частые вопросы о OmniHuman

Сколько стоит одна генерация с OmniHuman?

Оплата — кредитами, а цена зависит от модели: OmniHuman (фото → речь) — 322 кредитов. Точная цена показывается до того, как ты запустишь генерацию.

Какие ограничения у OmniHuman?

Вот что поддерживает каждая модель: OmniHuman (фото → речь) — соотношения сторон 1:1, 9:16, 16:9, длительность 5 сек, 10 сек.

Для чего лучше всего подходит OmniHuman?

Сильные стороны по моделям: OmniHuman (фото → речь) — Из ОДНОГО фото и звука делает видео, где человек говорит или поёт — без съёмки, Двигает не только губы: считывает ЭМОЦИЮ в звуке и играет всем телом — взволнованная речь даёт другие жесты, чем тихий исповедальный тон, Внутри работают ДВА ума: один разбирает смысл звука и планирует жест, второй рисует его кадр за кадром.

OmniHuman в сравнении с другими моделями

Все сравнения моделей

Попробуй OmniHuman сейчас

Генерируй свои видео с OmniHuman прямо в браузере — без установки, на русском.