OmniHuman — oživi sliko osebe z glasom in gibanjem

Kaj je OmniHuman

OmniHuman je generativni video model, ki ga je razvil ByteDance — podjetje, ki mu pripada TikTok. Vzame eno samo sliko osebe in zvočni posnetek (govor ali pesem) ter ju pretvori v video, v katerem oseba s slike govori ali poje. Gibi ustnic, glave in telesa se sinhronizirajo z zvokom, tako da statična slika oživi na naraven način.

Za razliko od modelov, ki sliki preprosto dodajo gibanje, je OmniHuman usmerjen prav v človeško podobo in govor — cilj je, da ustnice natančno sledijo slišanemu, izraz in kretnje pa delujejo živo, ne mehanično. Zato je priročna izbira, kadar želiš, da določena slika osebe „spregovori“ z danim glasom.

Na genkiki.com je model na voljo kot „OmniHuman (slika → govor)“ v načinu Video iz slike — naložiš portret in zvok, sistem pa vrne končan video.

Različice in zmožnosti v generiram

OmniHuman je na voljo kot en model z jasno nalogo: oživljanje slike osebe z glasom. Spodaj je povzeto, kaj počne.

VariantaNačiniZa kaj je
OmniHuman (slika → govor)Video iz slikePretvori sliko osebe + zvočni posnetek v video, v katerem oseba govori ali poje, s sinhronizacijo ustnic, glave in telesa

Video iz slike

Dodaš sliko osebe in zvočni posnetek. OmniHuman ohrani podobo s slike in doda gibanje ustnic v taktu z govorom ter naravne gibe glave in telesa. Rezultat je video, v katerem je oseba s slike videti, kot da res izgovarja ali poje dodani zvok.

Za kaj je primeren

  • Oživljanje portreta — pripravi statično sliko, da spregovori ali zapoje.
  • Govoreči avatarji — ustvari lik ali obraz, ki z določenim glasom predstavi sporočilo.
  • Govoreče slike — oživi družinsko, zgodovinsko ali promocijsko sliko osebe.
  • Ozvočenje statične slike — dodaj glas in mimiko posameznemu kadru, brez kamere in snemanja.

Kako začeti

Odpri AI Studio na genkiki.com, izberi OmniHuman (slika → govor), naloži jasno sliko osebe in zvočni posnetek, ki ga želiš slišati, ter zaženi generiranje. Za najboljši rezultat uporabi sliko, na kateri je obraz dobro viden in osvetljen, ter čist zvočni posnetek brez močnega hrupa v ozadju.

Modeli OmniHuman — podrobno

Kateri je za kaj dober, kje je šibak in za kaj ga ne bi smeli uporabljati.

OmniHuman (slika → govor)

referencavideo
Razmerja: 1:1, 9:16, 16:9 Trajanja: 5 sek, 10 sek Cena: 321 kreditov

Močen pri

  • Iz ENE slike in zvoka naredi video, v katerem oseba govori ali poje — brez posnetega videa
  • Ne premika samo ustnic: bere ČUSTVO v zvoku in igra s celim telesom — vznemirjen govor da drugačne geste kot tih, izpovedni ton
  • Pod površjem delujeta DVA uma: eden razbere pomen zvoka in načrtuje gesto, drugi jo nariše kader za kadrom
  • Petje je predvideno — premori, sprememba razpoloženja in odrsko gibanje
  • Zdrži več likov v kadru
  • Sprejme tudi kratko besedilo poleg zvoka — z njim določiš gibanje kamere, gesto ali razpoloženje

Šibak pri

  • Dolžina je odvisna od kakovosti: do 30 sekund zvoka pri 1080p in do 60 sekund pri 720p
  • Najboljši je pod 15 sekund — nad tem se rezultat začne razpadati
  • Prizor je STATIČEN: ozadje se ne spreminja, kamera miruje, oseba ostane približno na mestu
  • Rezultat je v celoti odvisen od slike — iz slabe slike pride slab video
  • Hiter in pretrgan govor mu da manj časa, da se umiri v gesti

Ne uporabljaj ga za

  • Ne pošiljaj slike iz profila, z zakritim obrazom ali z očali, ki skrivajo oči
  • Ne daj mu dolgega posnetka naenkrat — razreži ga na dele pod 15 sekund
  • Ne uporabljaj ga, kadar že imaš posnet video — tam je sinhronizacija ustnic natančnejša

Tipične naloge

  • Govoreči avatar iz ene slike
  • Pojoč portret
  • Nagovor po danem besedilu in glasu
  • Oživljen arhivski ali družinski portret
  • Voditelj za kratek video, brez snemalnega dne

Pogosta vprašanja o OmniHuman

Koliko stane ena generacija z modelom OmniHuman?

Plačuje se s krediti, cena pa je odvisna od modela: OmniHuman (slika → govor) — 321 kreditov. Natančna cena se prikaže, preden zaženeš generiranje.

Kakšne so omejitve modela OmniHuman?

Tukaj je, kaj podpira vsak model: OmniHuman (slika → govor) — razmerja 1:1, 9:16, 16:9, dolžine 5 sek, 10 sek.

Za kaj je najprimernejši OmniHuman?

Prednosti po modelih: OmniHuman (slika → govor) — Iz ENE slike in zvoka naredi video, v katerem oseba govori ali poje — brez posnetega videa, Ne premika samo ustnic: bere ČUSTVO v zvoku in igra s celim telesom — vznemirjen govor da drugačne geste kot tih, izpovedni ton, Pod površjem delujeta DVA uma: eden razbere pomen zvoka in načrtuje gesto, drugi jo nariše kader za kadrom.

OmniHuman proti drugim modelom

Vse primerjave modelov

Preizkusi OmniHuman zdaj

Ustvari video z modelom OmniHuman neposredno v brskalniku — brez namestitve, v slovenščini.