TutorialУроки та покрокові посібники4 хв читання

Аватар, що говорить, і синхронізація губ для портретів

Зберіть портрет, що говорить, за згодою для бібліотечного вітання з одного речення: зафіксуйте обличчя, запишіть голос, перевірте таймінг рота поза OmniArt і перегляньте кадрування до публікації.

Команда OmniArt

Аватар, що говорить, — це портрет, який ніби промовляє. Корисне завдання вузьке: вітання бібліотеки, коротка репліка про продукт або вступ до уроку з одного-двох речень. Цей посібник бере вигадану помічницю бібліотеки, Mara Chen, як приклад планування. Її репліка: Ваше замовлення чекає на стійці видачі.

В OmniArt портрет готують у просторі зображень, а голос генерують моделлю мовлення в просторі аудіо. У публічному каталозі є моделі зображень, моделі відео і моделі мовлення. Окремого керування синхронізацією губ або аватаром, що говорить, яке накладає сценарій на форму рота, у каталозі немає. Завершіть це суміщення у зовнішньому редакторі синхронізації губ, потім перегляньте файл у кадруванні, яке опублікуєте. Тло категорії — у нотатках про аватари, нотатках про синхронізацію губ і нотатках про фотоаватар.

Для чого потрібен портрет, що говорить

Беріть портрет, що говорить, коли обличчя несе повідомлення, а кадр лишається близьким. Репліка Mara працює, бо глядачеві потрібен один факт і місце, куди дивитися: стійка видачі, а не екскурсія будівлею. Заплануйте одну думку, одне обличчя й одне кадрування. Кадр із полицями належить окремому ролику.

Отримайте згоду, перш ніж оживляти обличчя

Оживляйте обличчя, яке створили ви, або реальну людину, яка погодилася саме на це використання. Якщо Mara заснована на колегі, отримайте письмове «так» на портрет, на голос і на місця, де викладете ролик.

Попередження

Обійдіть приватних осіб, публічних постатей і голоси клієнтів, які вам не дозволено імітувати. Коли результат — реалістична синтетична людина, додайте розкриття, якого просить майданчик призначення, у підписі або на самому зображенні.

Напишіть сценарій і оберіть голос

Пишіть на один видих. «Ваше замовлення чекає на стійці видачі» лягає чисто. Прочитайте репліку вголос. Якщо спотикаєтеся, скоротіть слова до генерації.

Згенеруйте голос у просторі аудіо OmniArt і тримайте одне голосове налаштування на всю річ. Посібник MiniMax Speech 2.8 розбирає дублі HD і Turbo та пунктуацію. Тримайте те саме налаштування від тестової репліки до фінальної, включно з короткою паузою з кожного краю.

Проженіть тест синхронізації на одній короткій репліці

До будь-якого зовнішнього інструмента зробіть короткий тест «зображення у відео»: у Mara невеликий кивок або кліпання. Цей тест перевіряє світло, плечі і те, чи лишається обличчя обличчям Mara. Він не стверджує, що рот збігається зі словами. Відеомодель, яка приймає зображення, може зрушити стоп-кадр. Цей рух не є керуванням, яке прив’язує кадри до файлу голосу.

Візьміть схвалений голос у редактор синхронізації губ поза OmniArt і синхронізуйте лише це одне речення. Програйте на звичайній швидкості зі звуком. Рот має відкритися на першому слові й заспокоїтися, коли фраза закінчується, а щелепа лишається прикріпленою до обличчя.

Якщо тест не проходить, змініть один вхід. Візьміть ясніше зображення анфас, повільніше читання або чистіший аудіофайл. Наприклад, відхиліть селфі у три чверті з втягнутим підборіддям, якщо воно ховає нижню губу: інструменту синхронізації, можливо, доведеться вигадати бракуючий край рота. Це критерій відхилення, а не результат тесту, який ми проводили.

Тримайте обличчя незмінним між дублями

Mara потрібні ті самі очі, той самий проділ і відкритий комір на стоп-кадрі, у тесті руху і в синхронізованому експорті. Повторно використайте схвалене зображення. Посібник із персонажа застосовується і тут, хоча виконання — одне речення.

Схвалений стоп-кадр знято на рівні очей, вікно бібліотеки за її лівим плечем, і ніщо не перетинає рот. Сонцезахисні окуляри, рука біля підборіддя, сильне розмиття і крутий профіль ховають форми, які редактору синхронізації губ треба прочитати.

Перегляньте ролик у фінальному кадруванні

Перегляньте експортований файл у кадруванні, яке опублікуєте. Для бібліотечного допису 9:16 поставте субтитри нижче підборіддя, щоб вони не перетинали рот. Перевірте, що очі й далі зустрічають об’єктив після кадрування, що в голосі немає шипіння кімнати і що слова на екрані збігаються з промовленою реплікою.

Подивіться один раз заради сенсу і один раз заради рота. Кадр, який на паузі виглядає різким, може все ще спізнюватися на початку фрази. Тримайте музику тихіше за голос. Якщо кадрування зрізає комір, поверніться до схваленого стоп-кадру.

З чого почати в OmniArt

Згенеруйте Mara як оригінальний портрет анфас у просторі зображень: обидва ока і рот вільні. Згенеруйте голос з одного речення в просторі аудіо і збережіть цей дубль. Відеомодель використовуйте лише для короткого тесту руху стоп-кадру. Синхронізацію губ завершіть у зовнішньому редакторі, потім подивіться фінальне кадрування з субтитрами на місці, перш ніж публікувати.

Готові творити?

Почніть створювати вражаючий контент зі ШІ

Почати безкоштовно