Как создать говорящий аватар

Подготовьте чёткий портрет и законченную фразу, выберите настройки и проверьте речь, движения рта и узнаваемость перед сохранением дубля.

LumiYingОбновлено

Начните с записи, которую хотите услышать

Подготовьте чёткий портрет и запись законченной фразы в MP3 или WAV. Откройте «Говорящий ИИ-аватар», выберите модель и загрузите файлы. Укажите формат и длительность, в которую помещается аудио. Создайте ролик и проверьте его со звуком.

Послушайте запись до выбора фотографии. Спокойному объяснению подходит хорошо видимое лицо и устойчивый кадр. Для короткого приветствия уместна более тёплая мимика. Начните с одного человека, чтобы оценить связь голоса, лица и времени.

Сначала голос, затем исполнение

  1. Шаг 01 Вырежьте законченную фразу

    Выберите короткое предложение с небольшой паузой до первого и после последнего слова. Уберите громкую фоновую музыку и перегруженные участки. Экспортируйте MP3 или WAV в пределах лимитов модели и прослушайте всю запись.

  2. Шаг 02 Выберите хорошо видимое лицо

    Используйте портрет анфас или с лёгким поворотом. Рот, челюсть и глаза должны быть видны, вокруг головы и плеч нужен запас. Рука у губ, сильная тень или крайний профиль мешают оценке движения. На изображении должен быть один персонаж.

  3. Шаг 03 Загрузите файлы и задайте кадр

    Выберите модель, добавьте портрет и запись. Длительность должна покрывать всё аудио. Для фразы в 7 секунд подойдёт доступный вариант в 10 секунд. Подберите соотношение сторон под портрет и место публикации, затем проверьте кредиты.

  4. Шаг 04 Опишите только нужное исполнение

    Базовое указание уже просит произнести запись. В необязательном поле задайте спокойное объяснение, лёгкий кивок или улыбку в конце. Начните с неподвижной камеры. Второй противоречащий текст делает речевую задачу менее ясной.

  5. Шаг 05 Проверьте весь дубль со звуком

    Сравните запись и видео на обычной скорости. Проверьте первое слово, звуки с сомкнутыми губами, тихие паузы и последнее слово. Затем оцените постоянство лица, одежды и фона. Через повторное редактирование замените один файл или упростите указания. Сохраните удачные настройки для следующей фразы.

Подберите согласованные исходные материалы

Практичная начальная настройка

Портрет
Одно открытое лицо в устойчивой композиции
Оставьте рот и челюсть видимыми и запас вокруг головы.
Голос
Один человек произносит законченную фразу
Проверьте перегрузку, фоновые голоса и резкий обрыв.
Указания
Выражение лица и небольшие жесты
Подача должна соответствовать записи.
Длина и формат
Поддерживаемая длительность, покрывающая аудио
Вся фраза вместе с начальной паузой должна помещаться в ролик.

Три исполнения для проверки

Послушайте запись, посмотрите дубль и загрузите те же материалы для новой версии.

Представление в студии

Начните с первого слова и следите за ртом во время пауз. При проверке нового портрета сохраняйте прямое кадрирование, чтобы движение камеры не скрывало важную область.

Портрет

Запись голоса

Видеопример
Предлагаемый промпт

Используйте изображение 1 как образец единственного говорящего, его внешности, одежды и фона. Пусть персонаж произнесёт загруженную запись, согласуя слова, движения рта и тихие паузы. Сохраните то же лицо и неподвижную камеру. Используйте спокойное приветливое выражение и небольшие естественные жесты.

Загрузить пример

Объяснение от анимированного героя

У стилизованного героя проверьте читаемость рта и узнаваемость лица. Уменьшите жесты, если они отвлекают от объяснения.

Портрет

Запись голоса

Видеопример
Предлагаемый промпт

Используйте изображение 1 как образец единственного говорящего, его внешности, одежды и фона. Пусть персонаж произнесёт загруженную запись, согласуя слова, движения рта и тихие паузы. Сохраните то же лицо и неподвижную камеру. Объясняйте ясно и заинтересованно, со сдержанными жестами преподавателя.

Загрузить пример

Рассказ смотрителя

В уличной сцене сравните лицо и движения рта с записью и проверьте фон. Устойчивая камера и небольшие движения головы упрощают первую оценку.

Портрет

Запись голоса

Видеопример
Предлагаемый промпт

Используйте изображение 1 как образец единственного говорящего, его внешности, одежды и фона. Пусть персонаж произнесёт загруженную запись, согласуя слова, движения рта и тихие паузы. Сохраните то же лицо и неподвижную камеру. Рассказывайте задумчиво и неторопливо, слегка двигая головой.

Загрузить пример

Меняйте видимую или слышимую причину

Рот и голос расходятся
Быструю речь, шумное аудио или движения, закрывающие лицо
Возьмите более ясную короткую фразу и устойчивый фронтальный кадр. Сравните другую совместимую модель.
Пропало слово или обрезан конец
Длину записи относительно длительности видео
Увеличьте время или обрежьте запись на границе законченного предложения.
Меняется лицо или окружение
Закрытый портрет или противоречивые указания
Возьмите более чёткое фото и ограничьтесь небольшой мимикой.
Меняется сгенерированный голос
Исходную запись и полученную звуковую дорожку
Проверьте новый дубль с более чистым аудио. После замены дорожки в редакторе снова оцените движения рта.
Частые вопросы

Частые вопросы

Можно ввести текст вместо загрузки аудио?

Этот процесс использует загруженную запись голоса. Запишите фразу самостоятельно или подготовьте в отдельном голосовом инструменте, затем загрузите MP3 или WAV.

Можно использовать нарисованного персонажа?

Попробуйте чёткий портрет одного персонажа с хорошо видимыми лицом и ртом. Проверьте, сохраняется ли дизайн во время речи.

Что делать с длинным сценарием?

Разделите запись на законченные фразы в пределах лимитов модели. Создайте и проверьте каждую часть, затем соберите принятые клипы в редакторе.

Попробуйте одно лицо и одну фразу