AI-API til reference til video

Det genererer en ny video ud fra en tekstprompt og referencemedier som billeder og på nogle modeller også videoer eller lyd. Referencerne definerer motiver, udseende eller stil, mens prompten beskriver, hvad der sker. Outputtet er en nygenereret scene og ikke en redigering af et eksisterende klip.

Billede til video animerer et bestemt billede, som regel som første billedramme (og nogle gange en sidste billedramme), så klippet starter fra det billede. Reference til video bruger billeder som vejledning til identitet, objekter eller stil og lader modellen bygge en ny komposition. Vælg billede til video, når åbningsbilledet skal passe præcist.

Video til video tager eksisterende optagelser som den kilde, der skal redigeres, forlænges eller omformes. I reference til video styrer en referencevideo kun elementer som bevægelse, kamera eller stil i et nygenereret klip. Hvis du skal ændre et eksisterende klip og bevare indholdet, så sammenlign i stedet endpoints til video til video.

Grænserne varierer efter model, fra nogle få billeder til dusinvis på multimodale endpoints, og nogle modeller sænker billedgrænsen, når en referencevideo er med. Tjek endpointets dokumentation for antal, formater, filstørrelse og krav til billedformat, før du bygger dit uploadforløb.

Nogle modeller accepterer multimodale referencer: billeder til udseende, videoer til bevægelse eller kamera og lyd til lyd eller rytme. Andre accepterer kun referencebilleder. Nogle endpoints kræver mindst én visuel reference, når der leveres lyd, og begrænser referencevideoens varighed og opløsning.

Som regel ikke i den samme anmodning. På mange modeller udelukker felterne til billedrammer og referencefelterne hinanden, og anmodningen afvises, hvis begge dele sendes. Afgør, om opgaven er styret af billedrammer (billede til video) eller af referencer, før du sender.

Brug tydelige, veloplyste referencer, der viser motivet uden kraftig tildækning, og hold sættet fokuseret på det, der skal forblive det samme. Omtal motiverne udtrykkeligt i prompten, undgå modstridende referencer, og test et kort klip først. Konsistensen varierer stadig efter model, så sammenlign output på dine egne medier.

Det kan de. Nogle modeller begrænser den maksimale opløsning, bruger som standard et adaptivt billedformat eller fastlåser varigheden, når der bruges referencer. Læs parameterreglerne for det valgte endpoint, så anmodningen ikke fejler under valideringen.

Outputtets varighed og opløsning er de vigtigste faktorer. Afhængigt af modellen kan referencevideoer blive faktureret efter deres varighed, ekstra referencebilleder kan koste ekstra, eller reference-tokens ud over en gratis kvote kan blive afregnet. Tjek den aktuelle prisbeskrivelse for den model, du vælger.

Send modellen, prompten og reference-URL'erne til det dokumenterede PoYo-genereringsendpoint, gem det returnerede task_id, og brug statusforespørgsler eller en webhook til at hente resultatet. Sørg for, at reference-URL'erne er offentligt tilgængelige, og gem referencesættet sammen med jobbets registrering, så du kan sammenligne.