OmniHuman — 用聲音和動作讓人物照片開口說話

OmniHuman 是什麼

OmniHuman 是 字節跳動(TikTok 母公司)開發的生成式影片模型。它拿 一張人物照片 和一段 音訊(說話或唱歌),生成一段影片,讓照片裡的人開口說話或唱歌。嘴唇、頭部和身體的動作都跟聲音對得上,靜止的形象就自然地活了過來。

和那些只給照片加點動效的模型不同,OmniHuman 專門盯著 人物形象和說話 — 目標是嘴型嚴絲合縫地跟著聲音走,表情和手勢看著是活的,而不是機械的。所以,當你想讓某一張人物照片用某個聲音「開口」時,它是很合適的選擇。

在 genkiki.com,這個模型以 「OmniHuman(照片 → 說話)」 出現在圖生影片模式裡 — 你上傳一張肖像和一段音訊,系統回傳成片。

generiram 裡的版本與能力

OmniHuman 只有一個版本,任務很明確:用聲音讓人物照片活起來。下面是它能做的事。

版本模式用來做什麼
OmniHuman(照片 → 說話)圖生影片把人物照片 + 音訊變成會說話或唱歌的影片,嘴唇、頭部和身體都同步

圖生影片

你提供 一張人物照片 和一段 音訊。OmniHuman 保留照片裡的樣貌,按語音節奏驅動嘴型,同時加上自然的頭部和身體動作。結果是一段影片,照片裡的人看起來真的在說、在唱你給的那段聲音。

適合做什麼

  • 讓肖像活過來 — 讓一張靜止照片開口說話或唱歌。
  • 會說話的數位人 — 做一個角色或一張臉,用指定的聲音說出你的內容。
  • 會說話的照片 — 讓家庭照、老照片或人物產品照動起來。
  • 給靜態形象配音 — 不用攝影機、不用拍攝,就給單張畫面加上聲音和表情。

怎麼開始

打開 genkiki.com 的 AI 工作室,選 OmniHuman(照片 → 說話),上傳一張清晰的人物照片和你想聽到的音訊,然後開始生成。想要最好的效果,就用一張臉清楚、光線好的照片,配上沒有明顯背景噪音的乾淨錄音。

OmniHuman 的模型 — 詳解

哪個適合做什麼、弱在哪裡、不該拿來做什麼。

OmniHuman(照片 → 說話)

參考素材個影片
畫面比例: 1:1, 9:16, 16:9 時長: 5 秒, 10 秒 價格: 322 點數

擅長

  • 只用一張照片和一段聲音,就做出這個人說話或唱歌的影片——不需要拍攝任何影片
  • 它不只是動嘴唇:它讀出聲音裡的情緒,用整個身體去演——激動的語氣給出的手勢,和低聲傾訴時完全不同
  • 底下有兩個「大腦」在幹活:一個讀懂聲音的意思、規劃動作,另一個把它一幀一幀畫出來
  • 唱歌是專門考慮過的——停頓、情緒轉折和舞台上的動作
  • 畫面裡有幾個人物也能處理
  • 除了聲音,還可以給一小段文字——用它來指定鏡頭運動、手勢或情緒

不擅長

  • 長度取決於品質:1080p 時聲音最長 30 秒,720p 時最長 60 秒
  • 15 秒以內效果最好——超過之後結果就開始散架
  • 場景是靜止的:背景不變,鏡頭不動,人也大致待在原地
  • 結果完全取決於那張照片——照片差,影片就差
  • 說話又快又斷斷續續,它就沒那麼多時間把動作做到位

不要用它來做

  • 別給它側臉的照片、臉被遮住的照片,或者眼鏡擋住眼睛的照片
  • 別一次給它很長的錄音 —— 切成 15 秒以內的片段
  • 你已經有拍好的影片時,別用它 —— 那種情況下對嘴型更準

典型用途

  • 用一張照片做會說話的頭像
  • 會唱歌的肖像
  • 按給定的文字和聲音做致詞
  • 讓舊照片或家庭肖像動起來
  • 短影片的主持人,不用專門拍攝

OmniHuman 常見問題

用 OmniHuman 生成一次要多少錢?

以點數支付,價格依模型而定:OmniHuman(照片 → 說話) — 322 點數。開始生成前會顯示確切價格。

OmniHuman 有哪些限制?

以下是每個模型支援的內容:OmniHuman(照片 → 說話) — 畫面比例 1:1, 9:16, 16:9, 長度 5 秒, 10 秒。

OmniHuman 最適合做什麼?

各模型的強項:OmniHuman(照片 → 說話) — 只用一張照片和一段聲音,就做出這個人說話或唱歌的影片——不需要拍攝任何影片, 它不只是動嘴唇:它讀出聲音裡的情緒,用整個身體去演——激動的語氣給出的手勢,和低聲傾訴時完全不同, 底下有兩個「大腦」在幹活:一個讀懂聲音的意思、規劃動作,另一個把它一幀一幀畫出來。

OmniHuman 與其他模型比較

所有模型比較

立即試用 OmniHuman

直接在瀏覽器裡用 OmniHuman 生成你自己的 影片 — 無需安裝,中文介面。