AI-referentie-naar-video-API

Ze genereert een nieuwe video uit een tekstprompt en referentie-assets zoals afbeeldingen, en bij sommige modellen ook video's of audio. De referenties bepalen onderwerpen, uiterlijk of stijl, terwijl de prompt beschrijft wat er gebeurt. De uitvoer is een nieuw gegenereerde scène en geen bewerking van een bestaande clip.

Afbeelding naar video animeert een specifieke afbeelding, meestal als eerste frame (en soms met een laatste frame), zodat de clip bij dat beeld begint. Referentie naar video gebruikt afbeeldingen als richtlijn voor identiteit, objecten of stijl en laat het model een nieuwe compositie opbouwen. Kies afbeelding naar video als het openingsframe exact moet overeenkomen.

Video naar video gebruikt bestaand beeldmateriaal als bron om te bewerken, te verlengen of te transformeren. Bij referentie naar video stuurt een referentievideo alleen elementen als beweging, camera of stijl voor een nieuw gegenereerde clip. Moet je een bestaande clip aanpassen en de inhoud behouden, vergelijk dan endpoints voor video naar video.

De limieten verschillen per model, van een paar afbeeldingen tot tientallen bij multimodale endpoints, en sommige modellen verlagen de afbeeldingslimiet als er een referentievideo bij zit. Raadpleeg de endpointdocumentatie voor aantallen, formaten, bestandsgrootte en eisen aan de beeldverhouding voordat je je uploadflow bouwt.

Sommige modellen accepteren multimodale referenties: afbeeldingen voor uiterlijk, video's voor beweging of camera en audio voor geluid of ritme. Andere accepteren alleen referentieafbeeldingen. Sommige endpoints eisen minstens één visuele referentie als er audio wordt meegestuurd en beperken de duur en resolutie van referentievideo's.

Meestal niet in hetzelfde verzoek. Bij veel modellen sluiten de velden voor frameafbeeldingen en de referentievelden elkaar uit, en wordt het verzoek afgewezen als je allebei meestuurt. Bepaal voordat je verstuurt of de taak door frames wordt gestuurd (afbeelding naar video) of door referenties.

Gebruik heldere, goed belichte referenties die het onderwerp zonder veel obstructie tonen en houd de set gericht op wat gelijk moet blijven. Verwijs in de prompt expliciet naar de onderwerpen, vermijd tegenstrijdige referenties en test eerst een korte clip. De consistentie verschilt nog steeds per model, dus vergelijk de uitvoer met je eigen assets.

Dat kan. Sommige modellen beperken de maximale resolutie, gebruiken standaard een adaptieve beeldverhouding of leggen de duur vast als er referenties worden gebruikt. Lees de parameterregels van het gekozen endpoint, zodat het verzoek de validatie niet laat mislukken.

De duur en resolutie van de uitvoer zijn de belangrijkste factoren. Afhankelijk van het model kunnen referentievideo's op basis van hun duur worden gefactureerd, kunnen extra referentieafbeeldingen kosten toevoegen of kunnen referentietokens boven een gratis tegoed worden berekend. Bekijk de actuele prijsomschrijving van het model dat je kiest.

Stuur het model, de prompt en de referentie-URL's naar het gedocumenteerde PoYo-generatie-endpoint, sla de teruggegeven task_id op en haal het resultaat op via statusverzoeken of een webhook. Zorg dat de referentie-URL's openbaar bereikbaar zijn en bewaar de referentieset bij het jobrecord om te kunnen vergelijken.