API for AI-referanse til video

Det genererer en ny video ut fra en tekstprompt og referansefiler som bilder, og på noen modeller også videoer eller lyd. Referansene definerer motiver, utseende eller stil, mens prompten beskriver hva som skjer. Resultatet er en nygenerert scene, ikke en redigering av et eksisterende klipp.

Bilde til video animerer et bestemt bilde, vanligvis som første bilde (og noen ganger et siste bilde), slik at klippet starter fra det bildet. Referanse til video bruker bilder som veiledning for identitet, objekter eller stil og lar modellen bygge en ny komposisjon. Velg bilde til video når åpningsbildet må stemme nøyaktig.

Video til video tar eksisterende opptak som kilde for redigering, forlengelse eller omforming. I referanse til video styrer en referansevideo bare elementer som bevegelse, kamera eller stil i et nygenerert klipp. Trenger du å endre et eksisterende klipp og samtidig beholde innholdet, bør du heller sammenligne endepunkter for video til video.

Grensene varierer etter modell, fra noen få bilder til flere titalls på endepunkter med flere modaliteter, og noen modeller senker bildegrensen når en referansevideo er med. Sjekk endepunktdokumentasjonen for antall, formater, filstørrelse og krav til sideforhold før du bygger opplastingsflyten.

Noen modeller godtar referanser i flere modaliteter: bilder for utseende, videoer for bevegelse eller kamera og lyd for lyd eller rytme. Andre godtar bare referansebilder. Noen endepunkter krever minst én visuell referanse når det sendes med lyd, og begrenser varighet og oppløsning på referansevideoer.

Vanligvis ikke i samme forespørsel. På mange modeller utelukker feltene for bilder og referanser hverandre, og forespørselen avvises hvis begge sendes. Avgjør om oppgaven er styrt av bilder (bilde til video) eller av referanser før du sender inn.

Bruk tydelige referanser med godt lys som viser motivet uten store tildekninger, og hold settet fokusert på det som må være uendret. Nevn motivene eksplisitt i prompten, unngå motstridende referanser, og test et kort klipp først. Konsistensen varierer fortsatt mellom modeller, så sammenlign resultatene med dine egne filer.

Det kan de. Noen modeller begrenser maksimal oppløsning, bruker automatisk tilpasset sideforhold eller låser varigheten når referanser brukes. Les parameterreglene for det valgte endepunktet, slik at forespørselen ikke feiler valideringen.

Varighet og oppløsning på resultatet er de viktigste faktorene. Avhengig av modellen kan referansevideoer faktureres etter varighet, ekstra referansebilder kan gi tillegg, eller referansetokens utover en gratiskvote kan bli belastet. Sjekk den gjeldende prisbeskrivelsen for modellen du velger.

Send modellen, prompten og referanse-URL-ene til det dokumenterte genereringsendepunktet hos PoYo, lagre task_id du får tilbake, og bruk statusforespørsler eller en webhook til å hente resultatet. Sørg for at referanse-URL-ene er offentlig tilgjengelige, og lagre referansesettet sammen med jobben for sammenligning.