Model icon
omnihuman-2.0
Image to Video
Audio to Video
Talking Avatar
Weitere Modelle von ByteDance ansehen
Model:
Verwandeln Sie mit der OmniHuman 2.0 API auf PoYo ein Bild und eine Audiospur in ein 720p-Video, in dem die Person spricht, singt oder auftritt. Das audiogesteuerte Modell von ByteDance übernimmt Lippensynchronität, Mimik, Gesten und Körperbewegung, unterstützt durchgehende Aufnahmen von bis zu 5 Minuten und funktioniert mit Menschen, Tieren und stilisierten Figuren.

Input

Hinzugefügt 1/1

Dateien hier ablegen, einfügen oder eine URL hinzufügen. Required. Exactly one character image. JPEG, PNG, WebP, BMP, TIFF, GIF, HEIC or HEIF, up to 30 MB; 300–6,000 px per side and an aspect ratio between 0.4 and 2.5.

Image Urls 1
——
Hinzugefügt 1/1

Dateien hier ablegen, einfügen oder eine URL hinzufügen. Required. One WAV or MP3 voice, song or dialogue track, 4–300 seconds and up to 15 MB. The video length follows the audio.

Audio Url 1
1 · 11.0s

Output

Beispielausgabe

Dies sind Beispieldaten. Generieren Sie ein neues Ergebnis, um die echte Ausgabe zu sehen.

Task-ID:G60QLE8QQ1VJG4W9Erstellt:2026-10-17T17:23:10
Status:finishedFortschritt:100%
Preisinformationen

Transparente Preise ohne versteckte Kosten. Bezahle nur, was du nutzt.

ByteDanceomnihuman-2.0
720p
PoYo-Preis
$0.105/sec
21 Credits
Offizieller Preis
-
Du sparst
-

* Tatsächliche Gebühren basieren auf dem endgültigen Ergebnis.

OMNIHUMAN 2.0

Aus einem Bild und einer Audiospur wird ein sprechendes, singendes Video

OmniHuman 2.0 API für audiogesteuerte Avatar-Videos

OmniHuman 2.0 von ByteDance animiert ein einzelnes Foto mit Ihrer Stimme, einem Dialog oder einem Song. Das Modell übernimmt Timing, Tonfall und Emotion aus dem Audio, ergänzt natürliche Gesten und hält die Figur auch bei langen Aufnahmen stabil. Auf PoYo zahlen Sie nur für die generierten Videosekunden.

OmniHuman 2.0 Modell auf PoYo

01

OmniHuman 2.0 Bild + Audio zu Video

Verwenden Sie omnihuman-2.0 mit genau einem Bild in image_urls und einer WAV- oder MP3-Datei in audio_url. Das Audio muss 4–300 Sekunden lang und höchstens 15MB groß sein. Mit einem optionalen prompt steuern Sie Aktionen, Szenenelemente und Kamerabewegung. Die Ausgabe erfolgt in 720p und ist so lang wie das Audio.

Die wichtigsten Funktionen der OmniHuman 2.0 API

Offizielle OmniHuman 2.0 Beispiele zeigen emotionalen Ausdruck, Lippensynchronität, Dialoge mit mehreren Personen, Gesang und nicht-menschliche Figuren. Schalten Sie den Ton ein, um das Originalaudio zu hören.

01

Getreue Stimme, Tonfall und Emotion

OmniHuman 2.0 folgt Rhythmus, Intonation und Gefühl des Audios, statt nur die Lippen zu bewegen. Mimik, Kopfbewegung und Körpersprache steigen und fallen mit dem Vortrag, sodass dramatische Monologe ebenso natürlich wirken wie ruhige Erklärungen.

  • Mimik und Gesten werden vom Audio gesteuert
  • Natürliche Pausen, Atmung und Betonung
  • Optionaler Prompt zur Steuerung von Aktionen und Kamera

02

Präzise Lippensynchronität für jede Figur

Die Mundformen bleiben auf jede Silbe abgestimmt, selbst bei nicht-menschlichen Figuren. Tiere, Cartoon-Maskottchen, 3D-Figuren und stilisierte Illustrationen können sprechen oder singen und behalten dabei ihr ursprüngliches Design.

  • Exakte Mundbewegung auf Silbenebene
  • Funktioniert mit Fotos, Illustrationen und 3D-Figuren
  • Bewahrt das ursprüngliche Aussehen des Eingabebilds

03

Gespräche mit mehreren Personen

Ausgehend von einem Bild mit mehreren Personen inszeniert OmniHuman 2.0 ein natürliches Gespräch: Die sprechende Person redet, während die anderen zuhören und reagieren. Ideal für Interviews, Sketche und Dialogszenen, ohne separate Clips zusammensetzen zu müssen.

  • Mehrere Figuren in einem Bild
  • Zuhörer reagieren, während jemand spricht
  • Szene und Beleuchtung des Ausgangsbilds bleiben erhalten

04

Gesang und lange Aufnahmen bis zu 5 Minuten

OmniHuman 2.0 akzeptiert Audio von bis zu 300 Sekunden – genug für einen ganzen Song, eine Lektion oder eine Produktvorstellung in einer einzigen Generierung. Gesangsauftritte folgen der Melodie mit passender Atmung, Mimik und Körperrhythmik.

  • Audio von 4 Sekunden bis 5 Minuten
  • Gesang synchron zu Melodie und Rhythmus
  • Eine durchgehende Aufnahme ohne Zusammenschneiden

05

Tiere und stilisierte Figuren

Geben Sie Maskottchen, Haustieren und Animationsfiguren eine Stimme. OmniHuman 2.0 passt die Gesichtsbewegung an die Anatomie jeder Figur an, sodass ein Waschbär oder ein Cartoon-Held mit glaubwürdiger Mimik sprechen kann.

  • Gesichter von Tieren und Fantasiewesen
  • Cartoon-, Anime- und 3D-Stile
  • Ideal für Markenmaskottchen und Storytelling

Wer profitiert von der OmniHuman 2.0 API?

01

Bildung und Schulung

Verwandeln Sie aufgezeichnete Lektionen und Sprechertexte in Präsentationsvideos. Dank Unterstützung für lange Audios passen vollständige Erklärungen in eine Aufnahme, und ein gleichbleibender Dozent schafft Vertrautheit über den gesamten Kurs.

02

Marketing und E-Commerce

Erstellen Sie Sprechervideos, Produkterklärungen und lokalisierte Anzeigen aus einem einzigen Foto. Tauschen Sie das Audio aus, um Versionen in verschiedenen Sprachen mit demselben Präsentator zu produzieren.

03

Musik und Unterhaltung

Produzieren Sie Gesangsauftritte, Lyric-Videos und Figuren-Sketche. OmniHuman 2.0 folgt Melodie und Rhythmus und eignet sich damit für Covers, virtuelle Künstler und Kurzvideo-Unterhaltung.

04

Virtuelle Moderatoren und digitale Menschen

Animieren Sie virtuelle Moderatoren, Kundenservice-Avatare oder Markenbotschafter mit natürlicher Sprache und Gestik für Websites, Apps und soziale Kanäle.

05

Maskottchen und Animationsfiguren

Erwecken Sie Haustiere, Maskottchen und illustrierte Figuren für Kampagnen, Kinderinhalte und Storytelling zum Leben – ganz ohne klassische Animation.

06

Entwickler und Kreativplattformen

Integrieren Sie audiogesteuerte Avatar-Generierung über die asynchrone API von PoYo in Ihr Produkt – mit Task-Abfrage, Callbacks und sekundengenauer Abrechnung.

OmniHuman 2.0 vs OmniHuman 1.5

OmniHuman 2.0 behält den Ablauf von OmniHuman 1.5 mit einem Bild und einer Audiospur bei und verlängert eine einzelne Aufnahme von unter einer Minute auf 5 Minuten. Der Kompromiss ist die Auflösung: OmniHuman 2.0 gibt 720p aus, OmniHuman 1.5 bietet zusätzlich 1080p.

FunktionOmniHuman 2.0 auf PoYoOmniHuman 1.5
Eingaben1 Bild + 1 Audiospur + optionaler Prompt1 Bild + 1 Audiospur + optionaler Prompt
Maximale Audio- und Videolänge4–300 Sekunden (bis zu 5 Minuten)Unter 60 Sekunden bei 720p; unter 30 Sekunden bei 1080p
Ausgabeauflösung720p720p oder 1080p
Prompt-SteuerungOptional; steuert Aktionen, Szenenelemente und KamerabewegungOptional; steuert Aktionen, Objekte und Kamerabewegung
Szenen mit mehreren PersonenUnterstütztUnterstützt
GesangUnterstütztUnterstützt
Nicht-menschliche FigurenHaustiere, Cartoon- und Anime-FigurenTiere, anthropomorphe Figuren und Cartoons

Die Spalte OmniHuman 2.0 zeigt die Parameter, die PoYo akzeptiert. Die Spalte OmniHuman 1.5 basiert auf der OmniHuman-1.5-Projektseite von ByteDance, der BytePlus-Produktseite und der API-Dokumentation von fal. Bei beiden Modellen ist das Video so lang wie das eingegebene Audio.

So nutzen Sie die OmniHuman 2.0 API auf PoYo

Schritt 1: Registrieren und API-Schlüssel erstellen.
Melden Sie sich bei PoYo an und erstellen Sie einen Zugriffsschlüssel für Ihre Anwendung.
API-Schlüssel erhalten →

Schritt 2: Credits aufladen.
Laden Sie Credits auf Ihr Konto. Der Playground schätzt die Credits vor der Generierung anhand der Audiolänge.
Credits aufladen →

Schritt 3: API integrieren.
Senden Sie model: "omnihuman-2.0" mit image_urls, audio_url und einem optionalen Prompt an /api/generate/submit und fragen Sie anschließend die Task-ID ab oder geben Sie eine Callback-URL an.
API-Referenz ansehen →

Häufig gestellte Fragen zur OmniHuman 2.0 API

Was ist die OmniHuman 2.0 API?

OmniHuman 2.0 ist das audiogesteuerte Videogenerierungsmodell von ByteDance. Aus einem Bild und einer Audiodatei erzeugt es ein Video, in dem die Person spricht, singt oder auftritt – mit passender Lippensynchronität, Emotion und Gestik. Auf PoYo verwenden Sie die Modell-ID omnihuman-2.0.

Was kostet OmniHuman 2.0?

OmniHuman 2.0 kostet 21 Credits ($0.105) pro Sekunde generiertem Video. Der Playground schätzt die Kosten vor dem Absenden anhand der Audiodauer; die endgültige Abrechnung basiert auf der tatsächlichen Ausgabedauer. Ein 10-Sekunden-Video kostet zum Beispiel etwa 210 Credits.

Welche Audiodateien werden unterstützt?

audio_url akzeptiert eine WAV- oder MP3-Datei mit einer Länge von 4 bis 300 Sekunden und höchstens 15MB. Das Ausgabevideo ist so lang wie das Audio – eine 2-minütige Spur ergibt also ein 2-minütiges Video.

Welche Bilder eignen sich am besten?

Senden Sie genau ein Bild in image_urls. Klare, gut ausgeleuchtete Fotos mit sichtbaren Gesichtern liefern die zuverlässigsten Ergebnisse. ByteDance nennt JPEG, PNG, WebP, BMP, TIFF, GIF, HEIC und HEIF bis 30MB, mit Seitenlängen zwischen 300 und 6000 Pixeln und einem Seitenverhältnis zwischen 0.4 und 2.5.

Was steuert der Prompt?

Der Prompt ist optional. Beschreiben Sie damit Aktionen, Szenenelemente und Kamerabewegung, etwa „Sie lächelt und deutet auf das Produkt, mit langsamer Heranfahrt.“ Lippenbewegung und Emotion folgen weiterhin dem Audio.

Kann das Modell Tiere, Cartoons oder mehrere Personen animieren?

Ja. OmniHuman 2.0 unterstützt Menschen, Tiere, stilisierte und 3D-Figuren sowie Bilder mit mehreren Personen. Bei Bildern mit mehreren Personen inszeniert das Modell das Gespräch so, dass Sprecher und Zuhörer natürlich reagieren.

In welcher Auflösung gibt OmniHuman 2.0 Videos aus?

OmniHuman 2.0 gibt Videos in 720p aus. Der Bildausschnitt folgt Ihrem Eingabebild – schneiden Sie das Bild daher vor dem Absenden auf die gewünschte Komposition zu.

Darf ich generierte Videos kommerziell nutzen?

Prüfen Sie vor einer kommerziellen Nutzung die geltenden Modell- und Plattformbedingungen. Stellen Sie sicher, dass Sie die Rechte am Abbild im Bild sowie an Stimme oder Musik im Audio besitzen, und kennzeichnen Sie KI-generierte Inhalte, wo dies erforderlich ist.

Warum PoYo für den Zugang zur OmniHuman 2.0 API

01

Bezahlung pro generierter Sekunde

Kein Abonnement, kein Mindestumsatz. Berechnet werden die produzierten Videosekunden, und der Playground zeigt vor dem Absenden eine Schätzung an.

02

Mit eigenen Medien testen

Laden Sie im Playground ein Bild und eine Audiodatei hoch, fügen Sie einen Prompt hinzu und prüfen Sie die exakte JSON-Anfrage vor der Integration.

03

Eine API für viele Modelle

Nutzen Sie dieselbe Authentifizierung und denselben Task-Ablauf für OmniHuman 2.0, Kling Avatar 2.0 und weitere Video-, Bild- und Audiomodelle auf PoYo.

04

Tasks verfolgen oder Callbacks erhalten

Fragen Sie die Task-ID ab oder geben Sie eine Callback-URL an und rufen Sie das fertige Video über denselben asynchronen Ablauf ab.