Runway Act-Two: как оживить персонажа движениями, мимикой и жестами

Act-Two нужен, когда персонаж должен двигаться не случайно, а повторять реальную актёрскую игру. Вы записываете человека на видео, а Runway переносит его мимику, речь и движения на изображение или видео героя.

Это полезно для говорящих персонажей, рекламы, анимации и сцен, где обычного Image to Video недостаточно.

🚀 Конвертируйте изображения
без загрузки файлов на сервер

Бесплатный сервис Конвертус переведет JPG, JPEG, PNG, WEBP и AVIF в нужный формат
без потери качества.

👉 Начать бесплатно →

Что нужно для Act-Two

Понадобятся два входа:

• Driving performance — видео человека, который разыгрывает нужную сцену;
• Character — изображение или видео персонажа, которого нужно оживить.

Act-Two доступен начиная со Standard и стоит 5 кредитов за секунду. Поддерживаются ролики до 30 секунд.

Как открыть Act-Two

1. Перейдите в Apps.
2. Найдите Performance Capture with Act-Two.
3. Загрузите driving performance.
4. Добавьте изображение или видео персонажа.
5. Настройте Gestures и Facial Expressiveness.
6. Проверьте стоимость и нажмите Generate.

Каким должно быть performance-видео

Лучше всего работает запись, где:

• в кадре один человек;
• лицо хорошо освещено и видно всё время;
• нет монтажных склеек;
• движения естественные и не слишком резкие;
• для жестов руки видны с начала сцены;
• человек снят не дальше чем примерно по пояс.

Чем чище performance, тем меньше случайных искажений при переносе.

Изображение или видео персонажа

Если использовать изображение, Act-Two сам добавляет часть движения среды и позволяет переносить жесты и движение тела.

Если использовать видео персонажа, исходное движение камеры, окружения и тела сохраняется сильнее, а Act-Two в основном управляет лицом и выражением. Gesture control для character video недоступен.

Для большинства простых talking-character задач удобнее начать с хорошего изображения.

Что делает Gestures

Gestures переносит позы и движения тела из driving performance на изображение персонажа.

Если герой начинает слишком сильно менять позу или искажаться, попробуйте отключить Gestures и оставить только лицевую анимацию.

Также полезно, чтобы начальная поза человека в performance была похожа на позу персонажа.

Facial Expressiveness

Этот параметр регулирует силу лицевой анимации.

Высокое значение делает эмоции заметнее, но может повысить риск артефактов. Низкое значение сохраняет лицо стабильнее, но мимика будет слабее.

Лучше сначала попробовать значение по умолчанию, а затем менять его в одну сторону за раз.

Как сделать персонажа узнаваемым

Если вы сначала создаёте героя внутри Runway, подготовьте стабильное изображение через References.

Проследите, чтобы важные особенности были видны уже на исходнике. Если у персонажа должны быть необычные зубы, макияж, шрам или аксессуар, скрытая деталь не появится надёжно сама собой.

Почему руки и лицо искажаются

Частые причины:

• слишком резкие жесты;
• руки появляются из-за края кадра;
• лицо частично перекрывается;
• performance и персонаж начинают сцену в сильно разных позах;
• слишком высокая Facial Expressiveness.

Исправляйте сначала исходное performance-видео, а не пытайтесь компенсировать все проблемы повторными генерациями.

Сколько стоит Act-Two

Минимальная тарификация — 3 секунды. При цене 5 кредитов за секунду короткий тест стоит минимум 15 кредитов.

Поэтому перед длинной сценой полезно проверить небольшой фрагмент. Сравнение баланса на разных подписках есть в статье тарифы Runway.

Что делать после генерации

После удачного Act-Two ролика можно продолжить обработку: отредактировать визуальные элементы через Aleph 2.0 или в финале сделать upscale до 4K.

Если вы ещё не уверены, подходит ли Act-Two или другая модель, посмотрите сравнение моделей Runway.

Итог

Act-Two лучше всего работает как захват актёрской игры, а не как магическая кнопка анимации. Хорошее performance-видео с чистым лицом, естественными жестами и подходящей начальной позой влияет на результат сильнее, чем бесконечные повторные генерации.