GPT Image 2.5 API đã ra mắt. Tạo và chỉnh sửa hình ảnh ngay →
PoYoPoYo
WAN ANIMATE 2 · Gần tới

Chuyển chuyển chuyển động trung thực cao, bảo vệ danh tính và điều khiển máy ảnh dựa trên văn bản

Wan Animate 2 API: Hình ảnh hoạt hình và chuyển động độ trung thực cao

Chuyển đổi hình ảnh nhân vật thành một hiệu suất hoàn chỉnh được thúc đẩy bởi một video tham chiếu. 2 chuyển chuyển động cơ thể phù hợp với khung, biểu hiện khuôn mặt, chuyển động tay và chi tiết hiệu suất tinh tế trong khi vẫn giữ lại ngoại hình và cấu trúc cơ thể của nhân vật tham chiếu.

Điều khiển điểm nhìn dựa trên văn bản tách góc máy ảnh được tạo ra khỏi cảnh quay lái xe, cho phép người tạo một cách trực tiếp để giải thích lại một hiệu suất trên các phong cách nhân vật và vị trí máy ảnh khác nhau.

Các tính năng cốt lõi của Wan Animate 2 API

Điều kiện trực tiếp video, bảo vệ danh tính và quan điểm có thể kiểm soát biến một màn trình diễn được ghi lại thành một nguồn hoạt hình nhân vật linh hoạt.

01

Wan Animate 2 API cho chuyển động nhân vật trung thực cao

Wan Animate 2 API lấy hình ảnh tham chiếu nhân vật và một video lái xe, sau đó tiêm các điều kiện chuyển động phù hợp khung hình trực tiếp bên trong Diffusion Transformer của nó. Hành trình hoạt hình nhân vật đầu đến cuối bảo tồn biểu hiện khuôn mặt, chuyển động tay, tư thế cơ thể và thời gian hiệu suất mà không cần một bộ xương hoặc máy chiết xuất điểm khóa riêng biệt, hỗ trợ chuyển động trung thực cao từ các biểu hiện tinh tế sang các hành động toàn thân lớn.

  • Tạo hình ảnh tham chiếu từ video lái xe
  • Giữ chuyển động khuôn mặt, tay và cơ thể phù hợp với khung
  • Gỡ bỏ bộ xương trung gian và chiết xuất điểm mấu chốt

02

Wan Animate 2 API cho hoạt hình nhân vật đa phong cách

Wan Animate 2 API hoạt động con người, nhân vật hoạt hình, robot, và động vật trên các danh tính thị giác và cấu trúc cơ thể khác nhau. Khi nhân vật tham chiếu khác biệt đáng kể về ngoại hình với người lái xe, tỷ lệ, hoặc hình dạng, mô hình sẽ nhắm lại chuyển động cho cơ thể mục tiêu trong khi vẫn giữ được thiết kế và danh tính xác định của nó, tạo ra hoạt hình liên kết giữa các nhân vật.

  • Hình ảnh động tác người, hoạt hình, robot và động vật
  • Nhập lại chuyển động trên các hình dạng cơ thể khác nhau
  • Bảo vệ vẻ ngoài, tỷ lệ và danh tính của nhân vật

03

Wan Animate 2 API Camera kiểm soát văn bản và hoạt hình đa hình

Wan Animate 2 API sử dụng một Viewpoint LoRA tùy chọn để tách máy ảnh được tạo ra khỏi góc gốc của video lái xe. 12 định hướng azimuth và 4 góc độ độ cao cho các góc nhìn bên, trên, dưới và ở mức mắt, biến một tham chiếu chuyển động thành hoạt hình nhân vật đa dạng phù hợp.

  • Kiểm soát các điểm xem hoạt hình nhân vật với văn bản
  • Chọn góc độ độ cao 12 và 4
  • Tạo nhiều lượt xem camera từ một màn hình

04

Wan Animate 2 API chuyển động bảo vệ danh tính

Wan Animate 2 API Anchores nhận dạng đến hình ảnh nhân vật tham chiếu và chuyển giao tư thế, biểu hiện, cử chỉ và chuyển động toàn thân từ video lái xe. Trong khi nhảy phức tạp, chuyển động nhanh và chi tiết hiệu suất tinh tế, nó giữ lại các đặc điểm khuôn mặt, tỷ lệ cơ thể và phong cách nhân vật để nhận dạng và chuyển động vẫn phù hợp trong suốt video được tạo ra.

  • Đáp nhập danh tính hình ảnh đến hình ảnh nhân vật tham chiếu
  • Chuyển chuyển các tư thế phức tạp, biểu hiện và chuyển động toàn bộ cơ thể
  • Giữ sự phù hợp của nhân vật trong suốt đoạn video

Bạn có thể tạo ra gì với động vật Wan 2 API

01

Avatar kỹ thuật số

Đưa ra trình bày kỹ thuật số từ chuyển động và biểu hiện của người được ghi lại trong khi vẫn giữ lại vẻ ngoài xác định của avatar. Điều này tạo ra một con đường trực tiếp từ một màn trình diễn thực tế đến hoạt hình nhân vật kỹ thuật số có thể sử dụng lại.

02

Người dẫn chương trình trực tiếp

Kết nối đoạn băng lái liên tục với kiến trúc phát trực tuyến Lite để tạo hoạt động cho một máy chủ ảo với ngôn ngữ cơ thể đáp ứng và hiệu suất khuôn mặt cho các dòng công việc trình bày trực tiếp.

03

Môi trường ảo tương tác

Dịch chuyển động của người biểu diễn hoặc người tham gia thành một nhân vật ảo bền vững cho không gian tương tác phụ thuộc vào cử chỉ đáp ứng, biểu hiện và chuyển động liên tục.

04

Sản xuất phim và hoạt hình

Sử dụng ghi lại hoạt động như một tham chiếu chuyển động cho phim, hoạt hình và sản xuất ảo. Các nhóm có thể khám phá một hiệu suất trên các thiết kế nhân vật khác nhau và quan điểm máy ảnh trước khi sản xuất cuối cùng.

Wan Animate 2 vs Wan Animate: Characters Animation Comparison

Cả hai mô hình đều hoạt hình một nhân vật tham chiếu từ một video lái xe. 2 mở rộng dòng công việc với điều hòa trực tiếp video lái xe, các cuộc biểu diễn chéo chữ rộng hơn, các quan điểm kiểm soát văn bản và kiến trúc phát trực tuyến Lite.

Khả năngWan Animate 2Wan Animate
Khu vực nhiệm vụAnimation nhân vật cuối đến cuốiHình ảnh hoạt hình và thay thế
Các đầu vàoHình ảnh tham chiếu, video lái xe, mô tả văn bảnHình ảnh nhân vật và video lái xe
Phòng chuyển độngĐiều hòa video lái trực tiếp trong một Transformer Diffusion được thiết kế lạiTái tạo chuyển động và biểu hiện từ một video lái xe
Bảo vệ danh tínhĐược thể hiện trên người, phim hoạt hình, robot và động vậtGiữ lại danh tính nhân vật được cung cấp trong quá trình hoạt hình
Điểm nhìn của máy ảnhTự động và độ cao được kiểm soát bằng văn bản với điểm nhìn tùy chọn LoRATheo quan điểm của video lái xe
Thiết kế streamingWan Animate 2 Lite đạt đến 24 FPS tại 400×720 trên một ống dẫn nghiên cứu bốn GPUPhòng làm việc hoạt hình nhân vật offline tiêu chuẩn

Số liệu phát sóng của Wan Animate 2 đề cập đến Wan Animate 2 Lite trong thiết lập nghiên cứu bốn GPU được công bố.

Các câu hỏi thường được hỏi về Wan Animate 2 API

Wan Animate 2 là gì?

Wan Animate 2 là một khung hoạt hình nhân vật từ đầu đến cuối từ Alibaba's Tongyi Lab. Nó chuyển chuyển chuyển động cơ thể, biểu hiện và chi tiết hiệu suất tốt của video lái xe sang nhân vật tham chiếu thông qua một bộ biến đổi pha trộn được thiết kế lại.

Wan Animate 2 tạo ra hoạt hình nhân vật như thế nào?

Wan Animate 2 trực tiếp điều chỉnh việc tạo ra trên hình ảnh ẩn hiện của video lái xe. Nó bảo tồn thông tin hiệu suất phù hợp với khung mà không dựa vào một bộ xương riêng biệt, điểm khóa hoặc máy thu hồi chuyển động trung gian.

Các đầu vào nào được sử dụng bởi đường ống dẫn chính thức của Wan Animate 2?

Các đường ống chính thức sử dụng một hình ảnh nhân vật tham chiếu, một video lái xe và một mô tả văn bản về nhân vật và nền.

Những kiểu nhân vật nào mà Wan có thể tạo ra 2 động?

Wan Animate 2 cho thấy chuyển động chuyển động cho con người, nhân vật hoạt hình, robot và động vật. Nó điều chỉnh hiệu suất lái xe trong khi vẫn giữ lại sự xuất hiện, tỷ lệ và cấu trúc cơ thể xác định của nhân vật tham chiếu.

Wan Animate 2 kiểm soát quan điểm của máy ảnh như thế nào?

LoRA tùy chọn của nó sử dụng mô tả văn bản cho camera azimuth và độ cao. Báo cáo cho thấy các quan điểm bên, trên, dưới và ở mức mắt khác với video lái xe.

Kết quả thời gian thực của Wan Animate 2 Lite là gì?

Wan Animate 2 Lite đạt đến khung 24 mỗi giây ở độ phân giải 400×720 trong đường ống phát phát bốn GPU được công bố. Các giá trị này mô tả cấu hình nghiên cứu được ghi chép của mô hình.

Wan Animate 2 khác với Wan Animate như thế nào?

Wan Animate hỗ trợ hoạt hình nhân vật và thay thế nhân vật từ hình ảnh nhân vật và video lái xe. Wan Animate 2 thêm điều hòa trực tiếp lái xe-video, các điểm nhìn máy ảnh được kiểm soát bằng văn bản, các biểu diễn chéo nhân vật rộng hơn và kiến trúc Lite với kết quả phát trực tuyến thời gian thực được công bố.

Tại sao phải theo dõi động vật Wan 2 API trên PoYo

01

Nhận biết những khả năng sáng tạo cơ bản

Xem lại chuyển động chuyển động, bảo vệ danh tính, kiểm soát máy ảnh và kiến trúc phát trực tuyến trong một cái nhìn tổng quan tập trung được xây dựng xung quanh các quyết định hoạt hình nhân vật thực tế.

02

Kết nối với dòng công việc của Wan Animate

So sánh đầu vào, phạm vi nhiệm vụ, xử lý chuyển động và kiểm soát điểm nhìn với Wan Animate để xem dòng công việc hoạt hình nhân vật phát triển như thế nào từ một lần tạo sang lần tạo tiếp theo.

03

Hãy đánh giá nó với các mô hình video khác

Đặt Wan Animate 2 trong danh mục mô hình video rộng hơn PoYo và xác định dòng công việc phù hợp nhất với tài sản nhân vật, tham chiếu chuyển động và mục tiêu sản xuất của bạn.

04

Hãy lên kế hoạch cho việc sản xuất

Sử dụng tổng quan khả năng, so sánh mô hình và kịch bản tạo để lập bản đồ cách Wan Animate 2 phù hợp với tài sản nhân vật, tham chiếu chuyển động và đường ống sản xuất của bạn.