Model icon
omnihuman-2.0
Image to Video
Audio to Video
Talking Avatar
Больше моделей ByteDance
Модель:
OmniHuman 2.0 API на PoYo превращает одно изображение и одну аудиодорожку в видео 720p, где персонаж говорит, поёт или выступает. Аудиоуправляемая модель ByteDance отвечает за липсинк, мимику и эмоции, жесты и движения тела, поддерживает непрерывные дубли длиной до 5 минут и работает с людьми, животными и стилизованными персонажами.

Input

Added 1/1

Drop files here, paste files, or add a URL. Required. Exactly one character image. JPEG, PNG, WebP, BMP, TIFF, GIF, HEIC or HEIF, up to 30 MB; 300–6,000 px per side and an aspect ratio between 0.4 and 2.5.

Image Urls 1
——
Added 1/1

Drop files here, paste files, or add a URL. Required. One WAV or MP3 voice, song or dialogue track, 4–300 seconds and up to 15 MB. The video length follows the audio.

Audio Url 1
1 · 11.0s

Output

Пример вывода

Это пример данных. Создайте новый результат, чтобы увидеть реальный вывод.

ID задачи:G60QLE8QQ1VJG4W9Создано:2026-10-17T17:23:10
Статус:finishedПрогресс:100%
Детали цен

Прозрачные цены без скрытых платежей. Оплата по факту использования.

ByteDanceomnihuman-2.0
720p
Цена PoYo
$0.105/с
21 кредитов
Официальная цена
-
Экономия
-

* Фактическая стоимость зависит от итогового вывода.

OMNIHUMAN 2.0

Одно изображение и одна аудиодорожка — говорящее и поющее видео

OmniHuman 2.0 API для видео с аватаром по аудио

OmniHuman 2.0 от ByteDance оживляет одну фотографию вашим голосом, диалогом или песней. Модель воспроизводит темп, интонацию и эмоции аудио, добавляет естественные жесты и сохраняет стабильность персонажа в длинных дублях. На PoYo вы платите только за секунды сгенерированного видео.

Модель OmniHuman 2.0 на PoYo

01

OmniHuman 2.0: изображение + аудио в видео

Используйте omnihuman-2.0 ровно с одним изображением в image_urls и одним файлом WAV или MP3 в audio_url. Длительность аудио — 4–300 секунд, размер — не более 15MB. Необязательный prompt позволяет задать действия, элементы сцены и движение камеры. Видео выводится в 720p, а его длительность совпадает с длительностью аудио.

Ключевые возможности OmniHuman 2.0 API

Официальные примеры OmniHuman 2.0 демонстрируют эмоциональную подачу, липсинк, диалоги нескольких людей, пение и нечеловеческих персонажей. Включите звук, чтобы услышать исходное аудио.

01

Точная передача голоса, интонации и эмоций

OmniHuman 2.0 следует ритму, интонации и настроению аудио, а не просто двигает губами. Мимика, движения головы и язык тела меняются вместе с подачей, поэтому и драматичные монологи, и спокойные объяснения выглядят естественно.

  • Мимика и жесты, управляемые аудио
  • Естественные паузы, дыхание и акценты
  • Необязательный промпт для управления действиями и камерой

02

Точный липсинк для любого персонажа

Форма рта совпадает с каждым слогом даже у нечеловеческих персонажей. Животные, мультяшные маскоты, 3D-фигуры и стилизованные иллюстрации могут говорить или петь, сохраняя исходный дизайн.

  • Точное движение рта на уровне слогов
  • Работает с фото, иллюстрациями и 3D-персонажами
  • Сохраняет исходный облик входного изображения

03

Разговоры нескольких людей

Начните с изображения, на котором несколько человек, и OmniHuman 2.0 поставит естественный разговор: говорящий произносит реплику, а остальные слушают и реагируют. Подходит для интервью, скетчей и диалоговых сцен без монтажа отдельных клипов.

  • Несколько персонажей в одном кадре
  • Слушатели реагируют, пока говорит собеседник
  • Сцена и освещение исходного изображения сохраняются

04

Пение и длинные дубли до 5 минут

OmniHuman 2.0 принимает аудио длительностью до 300 секунд — этого достаточно для целой песни, урока или обзора продукта за одну генерацию. При пении модель следует мелодии, согласуя дыхание, мимику и ритм тела.

  • Аудио от 4 секунд до 5 минут
  • Пение синхронизировано с мелодией и ритмом
  • Один непрерывный дубль без склеек

05

Животные и стилизованные персонажи

Подарите голос маскотам, питомцам и анимационным персонажам. OmniHuman 2.0 адаптирует мимику к анатомии каждого персонажа, поэтому енот или мультяшный герой говорит с правдоподобными выражениями лица.

  • Морды животных и существ
  • Мультяшный стиль, аниме и 3D
  • Идеально для бренд-маскотов и сторителлинга

Кому пригодится OmniHuman 2.0 API?

01

Образование и обучение

Превращайте записанные уроки и закадровый текст в видео с ведущим. Поддержка длинного аудио позволяет уместить полное объяснение в один дубль, а один и тот же преподаватель создаёт ощущение знакомства на протяжении всего курса.

02

Маркетинг и электронная коммерция

Создавайте видео со спикером, обзоры продуктов и локализованную рекламу из одной фотографии. Замените аудио, чтобы получить версии на разных языках с тем же ведущим.

03

Музыка и развлечения

Создавайте вокальные выступления, лирик-видео и скетчи с персонажами. OmniHuman 2.0 следует мелодии и ритму, поэтому подходит для каверов, виртуальных исполнителей и коротких развлекательных роликов.

04

Виртуальные ведущие и цифровые люди

Оживляйте виртуального ведущего, аватар службы поддержки или амбассадора бренда с естественной речью и жестами для сайтов, приложений и соцсетей.

05

Маскоты и анимационные персонажи

Оживляйте питомцев, маскотов и нарисованных персонажей для кампаний, детского контента и сторителлинга без традиционной анимации.

06

Разработчики и креативные платформы

Добавьте в свой продукт генерацию аватаров по аудио через асинхронный API PoYo с опросом задач, колбэками и посекундной оплатой.

OmniHuman 2.0 vs OmniHuman 1.5

OmniHuman 2.0 сохраняет схему OmniHuman 1.5 «одно изображение + одна аудиодорожка» и увеличивает длину одного дубля с менее чем минуты до 5 минут. Компромисс — разрешение: OmniHuman 2.0 выдаёт 720p, а OmniHuman 1.5 поддерживает ещё и 1080p.

ФункцияOmniHuman 2.0 на PoYoOmniHuman 1.5
Входные данные1 изображение + 1 аудиодорожка + необязательный промпт1 изображение + 1 аудиодорожка + необязательный промпт
Максимальная длина аудио и видео4–300 секунд (до 5 минут)Менее 60 секунд в 720p; менее 30 секунд в 1080p
Разрешение на выходе720p720p или 1080p
Управление промптомНеобязательно; задаёт действия, элементы сцены и движение камерыНеобязательно; задаёт действия, объекты и движение камеры
Сцены с несколькими людьмиПоддерживаютсяПоддерживаются
ПениеПоддерживаетсяПоддерживается
Нечеловеческие персонажиПитомцы, мультипликационные и аниме-персонажиЖивотные, антропоморфные и мультипликационные персонажи

В столбце OmniHuman 2.0 указаны параметры, которые принимает PoYo. Столбец OmniHuman 1.5 основан на странице проекта OmniHuman 1.5 от ByteDance, странице продукта BytePlus и документации API fal. У обеих моделей длина видео совпадает с длиной входного аудио.

Как использовать OmniHuman 2.0 API на PoYo

Шаг 1: Зарегистрируйтесь и создайте API-ключ.
Войдите в PoYo и создайте ключ доступа для своего приложения.
Получить API-ключ →

Шаг 2: Пополните кредиты.
Пополните баланс кредитов. Playground оценивает нужное количество кредитов по длительности аудио ещё до генерации.
Пополнить кредиты →

Шаг 3: Интегрируйте API.
Отправьте model: "omnihuman-2.0" вместе с image_urls, audio_url и необязательным промптом на /api/generate/submit, затем запрашивайте статус по ID задачи или укажите URL колбэка.
Открыть справочник API →

Часто задаваемые вопросы об OmniHuman 2.0 API

Что такое OmniHuman 2.0 API?

OmniHuman 2.0 — модель ByteDance для генерации видео на основе аудио. Получив одно изображение и один аудиофайл, она создаёт видео, где персонаж говорит, поёт или выступает с соответствующим липсинком, эмоциями и жестами. На PoYo используйте ID модели omnihuman-2.0.

Сколько стоит OmniHuman 2.0?

OmniHuman 2.0 стоит 21 кредит ($0.105) за секунду сгенерированного видео. Playground оценивает стоимость по длительности аудио до отправки, а итоговое списание рассчитывается по фактической длительности выходного видео. Например, 10-секундное видео стоит около 210 кредитов.

Какие аудиофайлы поддерживаются?

audio_url принимает файл WAV или MP3 длительностью от 4 до 300 секунд и размером не более 15MB. Длительность выходного видео совпадает с длительностью аудио, поэтому 2-минутный трек даёт 2-минутное видео.

Какие изображения подходят лучше всего?

Отправляйте ровно одно изображение в image_urls. Самые надёжные результаты дают чёткие, хорошо освещённые фото с хорошо видимым лицом. ByteDance указывает форматы JPEG, PNG, WebP, BMP, TIFF, GIF, HEIC и HEIF, размер до 30MB, стороны от 300 до 6000 пикселей и соотношение сторон от 0.4 до 2.5.

Чем управляет промпт?

Промпт необязателен. С его помощью можно описать действия, элементы сцены и движение камеры, например: "Она улыбается и указывает на продукт, камера медленно наезжает." Движение губ и эмоции по-прежнему следуют аудио.

Можно ли оживлять животных, мультперсонажей или нескольких людей?

Да. OmniHuman 2.0 поддерживает людей, животных, стилизованных и 3D-персонажей, а также изображения с несколькими людьми. На таких изображениях модель выстраивает разговор так, чтобы говорящие и слушающие реагировали естественно.

В каком разрешении OmniHuman 2.0 выводит видео?

OmniHuman 2.0 выводит видео в 720p. Кадрирование соответствует входному изображению, поэтому перед отправкой обрежьте изображение под нужную композицию.

Можно ли использовать сгенерированные видео в коммерческих целях?

Перед коммерческим использованием ознакомьтесь с применимыми условиями модели и платформы. Убедитесь, что у вас есть разрешение на использование внешности человека на изображении, а также голоса или музыки в аудио, и при необходимости указывайте, что контент создан ИИ.

Почему стоит использовать PoYo для доступа к OmniHuman 2.0 API

01

Оплата за каждую сгенерированную секунду

Без подписки и минимального платежа. Вы платите за секунды созданного видео, а Playground показывает оценку стоимости до отправки.

02

Тестируйте на своих материалах

Загрузите изображение и аудиофайл в Playground, добавьте промпт и посмотрите точный JSON-запрос перед интеграцией.

03

Один API для множества моделей

Используйте одну и ту же аутентификацию и процесс работы с задачами для OmniHuman 2.0, Kling Avatar 2.0 и других моделей видео, изображений и аудио на PoYo.

04

Отслеживайте задачи или получайте колбэки

Опрашивайте статус по ID задачи или укажите URL колбэка, а затем получите готовое видео в рамках того же асинхронного процесса.