AI-læbesynkronisering med Sync – voice-over og dubbing af video

Hvad er Sync

Sync (sync.so) er et firma, der er specialiseret i én ting og hører til blandt de stærkeste inden for den – læbesynkronisering. Firmaets teknologi animerer munden på en person i en færdig video på ny, så den udtaler en given lydoptagelse, samtidig med at ansigtet, mimikken og billedkvaliteten bevares. Målet er, at talen og læbebevægelserne passer naturligt sammen uden et kunstigt eller »forsinket« udtryk.

Fordi Sync er fokuseret helt og holdent på denne opgave, bliver resultatet særligt præcist og rent – velegnet, når læberne ses i nærbillede, og enhver afvigelse ville kunne ses. På genkiki.com er teknologien tilgængelig som et værktøj til voice-over og dubbing, der tager udgangspunkt i din video med et ansigt og din lyd.

Versioner og muligheder i generiram

I generiram er Sync tilgængelig i én kraftfuld variant, der virker i tilstanden Læbesynkronisering.

VariantTilstandeFunktion
Sync 2.0 Pro Lip-syncLæbesynkroniseringOmanimering i høj kvalitet af læberne på et ansigt i en video, så de udtaler en given lyd

Du lægger en video med et ansigt og en lydoptagelse (tale, sang, dubbing) ind, og Sync former personens læber, så de udtaler netop den lyd. Du har kontrol over, hvad der sker, når videoens og lydens længde er forskellig – du kan vælge, at klippet skal forkortes eller gentages, at der skal tilføjes stilhed, eller at talen skal fordeles om over hele længden, så slutningen bliver, som du vil have den.

Anvendelsesområder

  • Voice-over og dubbing af video med præcis læbesynkronisering – talen følger mundens bevægelser.
  • Skift af sprog for en person, der taler i en video: du lægger den oversatte lyd ind, og læberne tilpasses den.
  • Udskiftning af replikken eller stemmen i en færdig optagelse uden at optage igen.
  • Talende ansigter, avatarer og reklameklip, hvor læberne er i nærbillede, og præcisionen er vigtig.

Modellerne fra Sync — i detaljer

Hvad hver enkelt egner sig til, hvor den er svag, og hvad den ikke bør bruges til.

Sync 2.0 Pro Lip-sync

referencevideo
Størrelsesforhold: 1:1, 9:16, 16:9 Længder: 5 sek, 10 sek Pris: 167 kreditter

Stærk i

  • DEN MEST PRÆCISE læbesynkronisering på OPTAGET video — studieniveau
  • Fanger talerens stil direkte fra videoen, uden særskilt træning — den ser på input og danner sig et billede af personen i bevægelse
  • Fungerer op til 4K, og ansigtet renses med diffusionsopskalering, ikke på den gamle måde — skægget og munden bliver rene
  • Klarer et større ansigt i billedet — op til omkring 350 pixel, uden at kvaliteten falder
  • Egner sig både til spillefilm, tegnet og genereret video

Svag i

  • Kræver AKTIV tale i inputtet: hvis personen er tavs i billedet, går læberne måske slet ikke i gang
  • En stærk profil eller et delvist skjult ansigt giver et svagt resultat
  • Langsom – omtrent dobbelt så langsom som den lettere variant
  • Dyr

Brug den ikke til

  • Send ikke et billede ind, hvor personen er tavs eller bare kigger
  • Send ikke en kraftig profil eller et ansigt bag en hånd, mikrofon eller hår
  • Brug den ikke, når du kun har et billede – dér er den anden model

Typiske opgaver

  • Få en person i et klip til at sige en anden tekst
  • Skift sprog på den, der taler, med bevaret ansigt
  • Ret en replik uden at filme igen
  • Dubbing af en spillefilms- eller reklamescene

Ofte stillede spørgsmål om Sync

Hvad koster en generering med Sync?

Du betaler med kreditter, og prisen afhænger af modellen: Sync 2.0 Pro Lip-sync — 167 kreditter. Den præcise pris vises, før du starter genereringen.

Hvilke begrænsninger har Sync?

Dette understøtter hver model: Sync 2.0 Pro Lip-sync — billedformater 1:1, 9:16, 16:9, længder 5 sek, 10 sek.

Hvad er Sync bedst til?

Styrker pr. model: Sync 2.0 Pro Lip-sync — DEN MEST PRÆCISE læbesynkronisering på OPTAGET video — studieniveau, Fanger talerens stil direkte fra videoen, uden særskilt træning — den ser på input og danner sig et billede af personen i bevægelse, Fungerer op til 4K, og ansigtet renses med diffusionsopskalering, ikke på den gamle måde — skægget og munden bliver rene.

Sync mod andre modeller

Alle modelsammenligninger

Prøv Sync nu

Generer dine egne videoer med Sync direkte i browseren – uden installation, på dansk.