Как использовать ИИ для переноса движения

Подготовьте изображение и видео, согласуйте кадрирование и оцените результат.

LumiYingОбновлено

Начните с совместимой пары

Видео задаёт порядок и темп. Изображение предоставляет лицо, одежду и окружение. Обе ссылки должны показывать одинаковые части тела с близкой ориентацией.

Начните с одного человека и неподвижной камеры. Обрежьте видео до нужного действия. Для ходьбы нужны видимые ноги, для жеста сидя подходит более крупный план.

Подготовка, создание и сравнение

  1. Шаг Выберите действие

    Непрерывный клип должен начинаться до движения и заканчиваться после него. Удалите склейки и долгие паузы.

  2. Шаг Подберите изображение

    Нужны чёткое лицо, похожая ориентация тела и пространство для рук и ног.

  3. Шаг Настройте перенос

    Выберите модель и файлы. Укажите только полезные детали одежды и сцены. После загрузки проверьте длительность и кредиты.

  4. Шаг Посмотрите весь клип

    Сравните порядок, направление, паузы и баланс, затем лицо и одежду. При неоднозначности упростите референс.

Настройки под исходный клип

Набор настроек зависит от модели.

Что проверить перед созданием

Клип
Одно непрерывное действие
Склейки и несколько людей мешают определить цель.
Начальная поза
Близкие направление и кадрирование
Резкий переход может исказить начало.
Модель и длительность
Ограничения формы
Seedance предлагает поддерживаемые настройки результата. Kling 3 следует здесь клипу 3–10 секунд и скрывает автоматические параметры.
Указания
Краткие и согласованные
Сохраняйте одежду и окружение без противоречия движению.

Три пары для сравнения

Включите референс и пример, затем сравните указанные движения.

Бег по крыше

В беге сравните руки, ритм шагов и корпус. Сохранённый костюм ещё не означает правильный баланс.

Референс движения

Изображение персонажа
Пример видео
Указания к сцене

Сохраните футуристический костюм и крышу. Перенесите бег с естественными руками и стабильными пропорциями.

Загрузить пример

Медленное тайцзи

Медленное тайцзи выявляет небольшие скачки. Следите за руками, переносом веса и опорной ногой.

Референс движения

Изображение персонажа
Пример видео
Указания к сцене

Сохраните серебристую одежду, пожилого персонажа и озеро. Следуйте медленному тайцзи и переносу веса. Сохраняйте меч видимым и устойчивым в руке.

Загрузить пример

Баланс на волне

В серфинге важен контакт с доской. Проверьте ноги и наклон. Если стопа зависает, упростите или замените референс.

Референс движения

Изображение персонажа
Пример видео
Указания к сцене

Сохраните внешность, одежду и океан. Следуйте движениям тела с правдоподобным контактом с доской.

Загрузить пример

Исправьте видимую проблему

Деформация рук
Перекрытие или край кадра
Более медленный свободный жест с запасом места.
Скачок в начале
Разная ориентация тела
Похожая поза или обрезка начала.
Скольжение ног
Скрытая точка опоры
Более широкий план и простое действие.
Меняются лицо или одежда
Размытое изображение или резкий поворот
Более чёткое изображение и меньше поворотов и перекрытий.
Вопросы о Motion Control AI

Вопросы о Motion Control AI

Какие файлы нужны?

Чёткое изображение и короткий клип с одним видимым исполнителем. Руки и ноги должны оставаться в кадре. Ограничения указаны в форме.

Можно выбрать модель?

Выберите совместимую модель и проверьте её ограничения и кредиты в форме.

Движения будут точными?

Поза, кадрирование, перекрытия и склейки влияют на результат. Просмотрите весь клип.

Попробовать пару референсов