WAN ANIMATE 2 · KOMMER SNART

Bevegelsesoverføring med høy presisjon, bevaring av identitet og tekststyrt kamerakontroll

Wan Animate 2-API: karakteranimasjon og bevegelsesoverføring med høy presisjon

Gjør et karakterbilde om til en komplett framføring styrt av en referansevideo. Wan Animate 2 overfører kroppsbevegelser, ansiktsuttrykk, håndbevegelser og fine detaljer i framføringen bilde for bilde, samtidig som referansekarakterens utseende og kroppsstruktur bevares.

Tekststyrt kontroll av synsvinkelen skiller den genererte kameravinkelen fra styringsopptaket, slik at skapere har en direkte måte å tolke én framføring på nytt i ulike karakterstiler og kameraposisjoner.

Kjernefunksjoner i Wan Animate 2-API-et

Direkte videostyring, bevaring av identitet og kontrollerbare synsvinkler gjør én innspilt framføring til en fleksibel kilde for karakteranimasjon.

01

Wan Animate 2-API for helhetlig karakterbevegelse med høy presisjon

Wan Animate 2-API-et tar et referansebilde av en karakter og en styringsvideo, og legger deretter inn bevegelsesbetingelser som er synkronisert bilde for bilde, direkte i sin Diffusion Transformer. Den helhetlige animasjonsprosessen bevarer ansiktsuttrykk, håndbevegelser, kroppsstillinger og timing i framføringen uten egen skjelett- eller nøkkelpunktuttrekker, og støtter bevegelsesoverføring med høy presisjon fra subtile uttrykk til store helkroppsbevegelser.

  • Animer et referansebilde ut fra en styringsvideo
  • Bevar ansikts-, hånd- og kroppsbevegelser bilde for bilde
  • Fjern mellomtrinnet med uttrekk av skjelett og nøkkelpunkter

02

Wan Animate 2-API for karakteranimasjon på tvers av stiler

Wan Animate 2-API-et animerer mennesker, tegneseriefigurer, roboter og dyr på tvers av ulike visuelle identiteter og kroppsstrukturer. Når referansekarakteren skiller seg tydelig fra den styrende utøveren i utseende, proporsjoner eller form, tilpasser modellen bevegelsen til målkroppen og bevarer samtidig karakterens særpregede design og identitet, slik at animasjonen henger sammen på tvers av karakterer.

  • Animer mennesker, tegneseriefigurer, roboter og dyr
  • Tilpass bevegelser til ulike kroppsformer
  • Bevar karakterens utseende, proporsjoner og identitet

03

Wan Animate 2-API med tekststyrt kamera og animasjon fra flere vinkler

Wan Animate 2-API-et bruker en valgfri Viewpoint LoRA til å skille det genererte kameraet fra den opprinnelige vinkelen i styringsvideoen. Prompter på naturlig språk velger blant 12 asimutretninger og 4 høydevinkler for side-, ovenfra-, nedenfra- og øyehøydevisninger, slik at én bevegelsesreferanse blir til konsekvent karakteranimasjon fra flere vinkler.

  • Styr synsvinkelen i karakteranimasjonen med tekst
  • Velg mellom 12 asimut- og 4 høydevinkler
  • Generer flere kameravinkler fra én framføring

04

Wan Animate 2-API med bevegelsesoverføring som bevarer identiteten

Wan Animate 2-API-et forankrer identiteten i referansebildet av karakteren og overfører stillinger, uttrykk, gester og helkroppsbevegelser fra styringsvideoen. Under kompleks dans, raske bevegelser og subtile detaljer i framføringen beholder den ansiktstrekk, kroppsproporsjoner og karakterstil, slik at identitet og bevegelse henger sammen gjennom hele den genererte videoen.

  • Forankre den visuelle identiteten i referansebildet av karakteren
  • Overfør komplekse stillinger, uttrykk og helkroppsbevegelser
  • Hold karakteren konsekvent gjennom hele videoen

Hva kan du lage med Wan Animate 2-API-et?

01

Digitale avatarer

Styr en digital programleder med innspilte menneskelige bevegelser og uttrykk, samtidig som avatarens særpregede utseende bevares. Dette gir en direkte vei fra en ekte framføring til gjenbrukbar animasjon av digitale mennesker.

02

Programledere for direktesending

Koble kontinuerlige styringsopptak til Lite-strømmearkitekturen for å animere en virtuell programleder med responsivt kroppsspråk og ansiktsuttrykk i arbeidsflyter for direktesendte presentasjoner.

03

Interaktive virtuelle miljøer

Overfør bevegelsene til utøvere eller deltakere til en vedvarende virtuell karakter i interaktive rom som er avhengige av responsive gester, uttrykk og kontinuerlig bevegelse.

04

Film- og animasjonsproduksjon

Bruk innspilt skuespill som bevegelsesreferanse for film, animasjon og virtuell produksjon. Team kan utforske en framføring med ulike karakterdesign og kameravinkler før den endelige produksjonen.

Wan Animate 2 vs. Wan Animate: sammenligning av karakteranimasjon

Begge modellene animerer en referansekarakter ut fra en styringsvideo. Wan Animate 2 utvider arbeidsflyten med direkte styring fra videoen, bredere demonstrasjoner på tvers av karakterer, tekststyrte synsvinkler og en Lite-strømmearkitektur.

EgenskapWan Animate 2Wan Animate
OppgaveomfangHelhetlig karakteranimasjonKarakteranimasjon og karakterutskifting
InndataReferansebilde, styringsvideo, tekstbeskrivelseKarakterbilde og styringsvideo
BevegelsesflytDirekte styring fra videoen i en omarbeidet Diffusion TransformerGjengivelse av bevegelser og uttrykk fra en styringsvideo
Bevaring av identitetDemonstrert for mennesker, tegneseriefigurer, roboter og dyrBeholder identiteten til den oppgitte karakteren under animasjonen
KameravinkelTekststyrt asimut og høyde med valgfri Viewpoint LoRAFølger synsvinkelen i styringsvideoen
StrømmearkitekturWan Animate 2 Lite når 24 FPS i 400×720 i et forskningsoppsett med fire GPU-erVanlig arbeidsflyt for karakteranimasjon offline

Strømmetallet for Wan Animate 2 gjelder Wan Animate 2 Lite i det publiserte forskningsoppsettet med fire GPU-er.

Vanlige spørsmål om Wan Animate 2-API-et

Hva er Wan Animate 2?

Wan Animate 2 er et helhetlig rammeverk for karakteranimasjon fra Alibabas Tongyi Lab. Det overfører kroppsbevegelser, uttrykk og fine detaljer i framføringen fra en styringsvideo til en referansekarakter via en omarbeidet Diffusion Transformer.

Hvordan lager Wan Animate 2 karakteranimasjon?

Wan Animate 2 betinger genereringen direkte på den latente representasjonen av styringsvideoen. Den bevarer informasjon om framføringen bilde for bilde uten å være avhengig av en egen skjelett-, nøkkelpunkt- eller bevegelsesuttrekker som mellomtrinn.

Hvilke inndata bruker den offisielle Wan Animate 2-prosessen?

Den offisielle prosessen bruker et referansebilde av karakteren, en styringsvideo og en tekstbeskrivelse av karakteren og bakgrunnen.

Hvilke karakterstiler kan Wan Animate 2 animere?

Wan Animate 2 demonstrerer bevegelsesoverføring for mennesker, tegneseriefigurer, roboter og dyr. Den tilpasser den styrende framføringen og bevarer samtidig referansekarakterens særpregede utseende, proporsjoner og kroppsstruktur.

Hvordan styrer Wan Animate 2 kameravinkelen?

Den valgfrie Viewpoint LoRA bruker tekstbeskrivelser for kameraets asimut og høyde. Rapporten demonstrerer side-, ovenfra-, nedenfra- og øyehøydevinkler som skiller seg fra styringsvideoen.

Hva er sanntidsresultatet for Wan Animate 2 Lite?

Wan Animate 2 Lite når 24 bilder per sekund i oppløsningen 400×720 i den publiserte strømmeprosessen med fire GPU-er. Disse verdiene beskriver modellens dokumenterte forskningskonfigurasjon.

Hvordan skiller Wan Animate 2 seg fra Wan Animate?

Wan Animate støtter karakteranimasjon og karakterutskifting fra et karakterbilde og en styringsvideo. Wan Animate 2 legger til direkte styring fra videoen, tekststyrte kameravinkler, bredere demonstrasjoner på tvers av karakterer og en Lite-arkitektur med et publisert strømmeresultat i sanntid.

Derfor bør du følge Wan Animate 2-API-et hos PoYo

01

Forstå de kreative kjerneegenskapene

Se gjennom bevegelsesoverføring, bevaring av identitet, kamerakontroll og strømmearkitektur i én fokusert oversikt bygget rundt praktiske beslutninger om karakteranimasjon.

02

Koble den til arbeidsflyten i Wan Animate

Sammenlign inndata, oppgaveomfang, bevegelseshåndtering og kontroll over synsvinkel med Wan Animate for å se hvordan arbeidsflyten for karakteranimasjon utvikler seg fra én generasjon til den neste.

03

Vurder den sammen med andre videomodeller

Plasser Wan Animate 2 i den bredere katalogen av videomodeller hos PoYo, og finn arbeidsflyten som passer best til karakterressursene, bevegelsesreferansene og produksjonsmålene dine.

04

Planlegg en tydelig vei til produksjon

Bruk oversikten over egenskaper, modellsammenligningen og bruksscenariene til å kartlegge hvordan Wan Animate 2 passer inn med karakterressursene, bevegelsesreferansene og produksjonsflyten din.