Все инструменты

Заставить фото танцевать с помощью ИИ (перенос движения)

Видео с танцем и фото в полный рост: Kling 3.0 Motion Control заставляет человека с фото повторить хореографию, сохраняя лицо и одежду. Один и тот же танец на двух персонажах. Весь процесс виден без учётной записи.

Интерактивное демо

Настоящий воркфлоу, реальные результаты. Двигайте холст и приближайте как угодно.

Использовать этот воркфлоу

Реальный рабочий процесс: видео с танцем в узле «Медиа», два фото в полный рост в двух других узлах, и два узла «Видео», настроенных на Kling 3.0 Motion Control, которые получают видео через видеопорт и каждого персонажа через порт изображения.

Коротко

Что выдаёт воркфлоу
2 видео по 10 с в 720p, формат 9:16
Структура холста
6 нод, связанных 4 соединениями
Подключённые модели
Kling 3.0 Motion Control
Стоимость полного прогона
около 152 кредитов, то есть 1,82 $

Перенос движения - это когда жест из видео передаётся кому-то другому. Хореография, снятая танцовщицей, ваше фото в полный рост: получившееся видео показывает, как вы танцуете точно так же, как она, с вашим лицом, вашей одеждой и кадром исходного видео. Именно это платформы эффектов продают под названиями motion transfer или Genjutsu.

Узел «Видео», настроенный на Kling 3.0 Motion Control, принимает два входа: видео с движением и изображение персонажа. Длительность результата равна длительности видео, до тридцати секунд, и оплата идёт за секунду этого видео, измеренную по файлу. Описывать ничего не нужно: промпт необязателен и служит только для оформления декора.

В демонстрации танцуют два персонажа под одну хореографию: фото в полный рост и коллекционная фигурка. Подходит любое изображение персонажа целиком: сгенерированный портрет, маскот, персонаж видеоигры.

Как это сделать

  1. 1

    Найдите или снимите видео с движением

    Один человек, целиком, без монтажных склеек, лицом или в три четверти, на спокойном фоне. Трёх-десяти секунд достаточно для рилса. В демонстрации используется танец, сгенерированный на Kling.

  2. 2

    Сделайте фото в полный рост

    Стоя, лицом к камере, руки вдоль тела, целиком от ступней до головы, простой фон. Поза, близкая к началу видео, помогает модели начать точно.

  3. 3

    Подключите оба к узлу

    Видео - в видеопорт, фото - в порт изображения. Узел измеряет видео и показывает точную цену ещё до нажатия кнопки, в 720p или 1080p.

  4. 4

    Сгенерируйте, затем смените персонажа

    Персонаж повторяет движение в точности. Для другого человека замените только фото: видео с движением останется подключённым.

Варианты и сценарии использования

Тот же холст, настроенный под разные задачи: в каждом варианте меняются две-три строки промпта.

Рилс с танцем без съёмки самого себя

Модная хореография, ваше фото, и рилс готов в вертикальном формате: видео с движением задаёт формат, персонаж - это вы. Публикуйте как есть или добавьте музыку в узле «Монтаж».

Танцующий маскот бренда

Рисованный маскот, целиком, на однотонном фоне, повторяет снятый танец: человеческий жест на персонаже бренда, без аниматора. Линии и цвета остаются такими, как в рисунке.

Фигурка, которая оживает

Это второй пример из демонстрации: коллекционная фигурка сходит с подставки и танцует. Предмет, игрушка, статуэтка, всё, что имеет две руки и две ноги.

Один и тот же жест на всей команде

Одно видео с движением, одно фото на человека, один узел на человека: одна и та же хореография, исполненная десятью коллегами, для командного видео, смонтированного впритык.

Походка или жест, а не только танец

Перенос работает на любом движении: подиумная походка, приветствие, демонстрация продукта, спортивное движение. Демонстрация модного дефиле даёт хорошее видео с движением.

Придуманный персонаж, который движется как вы

Снимите себя, выполняющего жест, сгенерируйте персонажа в полный рост в узле «Изображение» и передайте ему своё движение: играете вы, а появляется он.

Частые ошибки

Видео с движением с несколькими людьми

Модель следует за одним скелетом. С двумя танцорами она выбирает неверно или смешивает движения. Кадрируйте одного человека, целиком, от начала до конца.

Фото сидя, по грудь или обрезанное

Персонаж должен быть целиком: модели нужны ноги и ступни, чтобы двигать ими. Фото по грудь заставляет её придумывать нижнюю часть тела.

Начальная поза, сильно отличающаяся от видео

Скрещённые руки на фото, поднятые руки в начале видео: первые кадры получаются неуверенными. Нейтральная поза, руки вдоль тела, обеспечивает чистый старт.

Описание танца в промпте

Жест берётся из видео, а не из текста. Промпт служит для декора, света или движения камеры. Оставить его пустым часто оказывается лучшим решением.

Рекомендуемые модели

Kling 3.0 Motion ControlWan 3.0Seedance 2.5Kling V3

Частые вопросы

Нужно ли умение танцевать?

Нет: танец берётся из видео с движением, а не от вас. Вы предоставляете фото в полный рост, а модель заставляет вас выполнить хореографию.

Сохраняются ли лицо и одежда?

Да: именно фото задаёт персонажа, а видео задаёт только жест. Лицо, стрижка и одежда остаются такими, как на фото.

Какая максимальная длительность?

Тридцать секунд в видеокадре, десять в кадре изображения. Более длинное видео отклоняется до начала генерации, без списания средств: сначала обрежьте его в узле «Монтаж».

Можно ли сохранить музыку из видео с танцем?

Да, переключатель в узле сохраняет звук видео с движением. Иначе вернёте свою музыку в узле «Монтаж».

Сколько стоит перенос движения?

Цена зависит от длительности видео с движением, за секунду, в 720p или 1080p, и отображается на кнопке, как только видео подключено. Техническая ошибка возвращается.

Можно ли использовать видео, найденное в интернете?

Технически да, если у вас есть на это право. Безопаснее самому снять жест или сгенерировать видео с движением прямо на холсте, как в демонстрации.

Сохраняется ли фон видео?

В видеокадре результат сохраняет кадр и декор видео с движением, с вашим персонажем внутри. Чтобы сохранить декор фото, выберите кадр изображения, ограниченный десятью секундами.

В чём отличие от опорного видео на Wan?

Wan 3.0 отталкивается от видео, чтобы направить сгенерированный план; перенос движения повторяет жест точно, кадр за кадром, на вашем персонаже. Для точной хореографии нужен именно он.

Заставить фото танцевать с помощью ИИ (перенос движения)

Использовать этот воркфлоу

Бесплатный аккаунт, без банковской карты. Воркфлоу откроется уже заполненным на вашем холсте.