Чтобы создать музыкальное видео с ИИ, выберите музыкальный фрагмент, подготовьте референсы и опишите действие и камеру. Создайте короткий клип и проверьте результат. Здесь разобран первый опыт и монтаж клипов в более длинное видео.
LumiYingОбновлено
Нужны MP3 или WAV, хотя бы одно изображение и описание сцены. Начните с десяти секунд и одного ясного музыкального момента.
Отметьте хук, вступление вокала или инструментальную фразу с понятными началом и концом. Например, экспортируйте 00:32–00:42 отдельным десятисекундным MP3 или WAV. Обрежьте заранее: в инструменте нет аудиотаймлайна. Соблюдайте пределы модели: 2–15 или 2–30 секунд и до 15 МБ.
Начните с ясного изображения артиста или сцены. Дополнительные изображения нужны для конкретной роли: внешность, место или свет. Загрузите 1–8 JPEG, PNG или WebP. Избегайте противоречащих лиц, костюмов и стилей. Объясните в запросе роль изображения 1, изображения 2 и остальных.
Назовите героя, действие, камеру и атмосферу. Вместо просто эпичного видео опишите два спокойных шага на крыше и медленный боковой проезд камеры в тёплом дневном свете. Укажите детали, которые нужно сохранить. Для первого опыта достаточно одного действия и одного движения камеры; у каждой склейки должна быть цель.
Откройте генератор и выберите модель с аудиовходом. Проверьте ограничения, загрузите музыку и изображения, вставьте запрос в описание сцены. Для десяти секунд музыки выберите десять секунд результата. Используйте 16:9 для горизонтального или 9:16 для вертикального видео и подходящие референсы. Выход — 720p; до запуска проверьте кредиты.
Посмотрите начало, середину и конец: узнаваемость героя, ясность движения и пригодность финального кадра. Отдельно послушайте изменения вокала, тайминга и посторонние звуки. Аудио направляет модель; точная сохранность записи и склейки на каждом ударе не гарантируются.
Повторное редактирование возвращает исходные аудио, картинки, запрос и настройки. При суетливом движении уберите действия или склейки. Если меняется герой, сократите конфликтующие референсы и опишите сохраняемые черты. Сначала сохраните удачный вариант. Повторное редактирование заполняет форму; новая генерация снова расходует кредиты.
Скачайте полезную версию. Для целой песни наметьте фрагменты и визуальные события и создайте нужные клипы. В редакторе положите оригинальную песню на аудиодорожку, расположите видео выше и подрежьте их по музыкальным фразам. Сохраняйте пропорции и цвет. Финальная сборка и текст песни добавляются в редакторе.
Решите это до генерации. Дополнительные картинки и склейки полезны, когда делают задачу понятнее.
Пресеты загружают изображение, запрос, длительность и пропорции. Добавьте свой подходящий аудиофрагмент и проверьте стоимость.
Используй изображение 1 для артиста, одежды и крыши. Создай десятисекундное выступление в тёплом дневном свете. Артист делает два спокойных шага, камера медленно движется вбок и заканчивает устойчивым средним планом. Следуй энергии музыки. Сохрани лицо и одежду; без постороннего диалога и текста.
Подготовьте десять секунд хука и выберите 16:9. Проверьте лицо и одежду по всему клипу и послушайте музыку. Если действие торопливое, оставьте камеру и уберите шаги.
Загрузить это задание
Используй изображение 1 для двух танцоров, одежды и джаз-клуба. Начни общим планом, приблизься, кратко покажи шаги крупнее и вернись к ясному плану обоих. Тёплый сценический свет и движения по джазовой фразе. Сохрани танцоров; без субтитров и постороннего диалога.
Подготовьте пятнадцать секунд в 16:9. При избытке склеек сначала попробуйте один общий план. Проверьте узнаваемость обоих и связь деталей ног со сценой. Тайминг оценивайте при просмотре.
Загрузить это заданиеСравните публичные демо по выступлению, сменам кадров и атмосфере. Загрузите изображение и запрос, чтобы попробовать направление со своей музыкой.
Непрерывное движение камеры следует за певицей на сцену. Демо: ByteDance. Проследите непрерывный путь из гримёрной на сцену. Для короткого опыта выберите только часть пути.
Следуй за певицей из гримёрной на сцену плавным непрерывным проездом. Сохраняй её внешность, ориентируй движение на энергию загруженной музыки.
Танец, детали и тёплый свет создают атмосферу выступления. Демо: ByteDance. Сравните общие планы и детали шагов. Каждой склейке нужна ясная цель.
Создай танец в ретро-джаз-клубе. Сохраняй внешность двух танцоров, чередуй общий план с короткой деталью шагов и следуй живым фразам музыки.
Артист остаётся в центре кадра на фоне крыши. Демо: Freebeat. Посмотрите, остаются ли артист и место понятными в движении. Простой фон облегчает поиск изменений героя.
Оставь артиста на крыше. Используй расслабленные ритмичные движения, медленный боковой проезд камеры и дневной свет в настроении трека.
Определите проблему до повторной генерации. Сохраняйте удачные входные данные и меняйте одну причину за раз.
Этот процесс требует также хотя бы одного изображения и описания. Для выступления возьмите артиста, для инструментала — пейзаж и объясните движение.
Спланируйте фрагменты и визуальные события, создайте короткие клипы и соберите их под оригинальную песню в редакторе. Генератор не делит и не соединяет целую песню автоматически.
Нет. Начните с одного сильного референса. Добавляйте картинки только для героя, места или стиля, всего до восьми, объясняя роли.
Аудиореференс может измениться в результате. Для сохранения записи используйте оригинальную песню как финальную дорожку и выровняйте клипы в редакторе.
Сначала скачайте видео, затем добавьте синхронизированный текст и склейки в редакторе. В генераторе нет редактора текста песни и шкалы битов.
Заполняет изображение и запрос; готовые задания также задают длительность и пропорции. Музыку добавляете вы. Загрузка сама не запускает платную генерацию.
Создайте короткое музыкальное видео из аудиофрагмента и референсных изображений. Выберите модель с поддержкой аудио, опишите сцену и оцените результат.
Создайте короткое музыкальное видео из аудиофрагмента и референсных изображений. Выберите модель с поддержкой аудио, опишите сцену и оцените результат.
Создавайте ИИ-видео со звуком из текста или изображения. Опишите фон, реплики и звуковые эффекты, сгенерируйте ролик и прослушайте его в LumiYing.
Создайте короткое видео по раскадровке. Загрузите сетку кадров или до восьми отдельных изображений и опишите движение.
Пусть удачный кадр длится дольше. Загрузите видео и опишите следующее действие, чтобы создать продолжение на основе исходного материала.
Нужны MP3 или WAV, хотя бы одно изображение и описание сцены. Начните с десяти секунд и одного ясного музыкального момента.
