Pratende avatar en lipsynchronisatie voor portretten

Een pratende avatar is een portret dat lijkt te spreken. De nuttige taak is smal: een bibliotheekwelkom, een korte productopmerking of een lesintro van één of twee zinnen. Deze gids gebruikt een fictieve bibliotheekassistent, Mara Chen, als planningsvoorbeeld. Haar zin is: Je reservering ligt klaar bij de balie.

Op OmniArt ontwerp je het portret in de afbeeldingswerkruimte en genereer je de stem met een spraakmodel in de audiowerkruimte. De openbare modelcatalogus heeft beeldmodellen, videomodellen en spraakmodellen. Er staat geen aparte lipsynchronisatie of pratende-avatarregeling in die een script op mondvormen legt. Rond die afstemming af in een externe lipsynchronisatie-editor en bekijk daarna het bestand in de uitsnede die je publiceert. Achtergrond bij de categorie staat in avatarnotities, lipsynchronisatienotities en fotoavatarnotities.

Waar een sprekend portret voor dient

Gebruik een sprekend portret wanneer het gezicht de boodschap draagt en de opname dichtbij blijft. Mara’s zin werkt omdat de kijker één feit nodig heeft en een plek om naar te kijken: de uitleenbalie, niet een rondleiding door het gebouw. Plan één gedachte, één gezicht en één kader. Een plankopname hoort in een aparte clip.

Vraag toestemming voordat je een gezicht animeert

Animeer een gezicht dat je zelf hebt gemaakt, of een echte persoon die met dit exacte gebruik instemde. Als Mara op een collega berust, haal dan een schriftelijk ja op voor het portret, de stem en de plekken waar je de clip plaatst.

Schrijf het script en kies de stem

Schrijf voor één adem. Je reservering ligt klaar bij de balie landt schoon. Lees de zin hardop. Als je struikelt, schrap woorden voordat je genereert.

Genereer de stem in de audiowerkruimte van OmniArt en houd één steminstelling voor het hele stuk. De gids MiniMax Speech 2.8 behandelt HD- en Turbo-opnamen en interpunctie. Houd één instelling van de testzin tot de uiteindelijke zin, inclusief de korte pauze aan elk uiteinde.

Draai een synctest op één korte zin

Maak vóór elk extern hulpmiddel een korte afbeelding-naar-videotest van Mara met een klein knikje of een knippering. Die test controleert licht, schouders en of het gezicht Mara blijft. Hij beweert niet dat de mond bij de woorden past. Een videomodel dat een afbeelding aanvaardt, kan het stilstaande beeld bewegen. Die beweging is geen regeling die frames aan je geluidsbestand koppelt.

Neem de goedgekeurde stem mee naar een lipsynchronisatie-editor buiten OmniArt en synchroniseer alleen deze ene zin. Speel hem op normaal tempo af met het geluid aan. De mond moet opengaan bij het eerste woord en tot rust komen wanneer de zin eindigt, met de kaak nog aan het gezicht.

Als de test faalt, verander je één invoer. Gebruik een duidelijker frontaal stilstaand beeld, een langzamere lezing of een schoner audiobestand. Wijs bijvoorbeeld een driekwartselfie met ingetrokken kin af als die de onderlip verbergt: een synchronisatiehulpmiddel moet de ontbrekende mondrand dan misschien verzinnen. Dit is een afwijzingscriterium, geen resultaat van een test die wij hebben uitgevoerd.

Houd het gezicht stil tussen de opnamen

Mara heeft dezelfde ogen, dezelfde haarscheiding en een open kraag nodig op het stilstaande beeld, in de bewegingstest en in de gesynchroniseerde export. Hergebruik de goedgekeurde afbeelding. De personagegids geldt hier ook, ook al is de uitvoering één zin.

Het goedgekeurde stilstaande beeld staat op ooghoogte, met het bibliotheekraam achter haar linkerschouder en niets over de mond. Een zonnebril, een hand bij de kin, zware onscherpte en een steil profiel verbergen de vormen die een lipsynchronisatie-editor moet lezen.

Bekijk de clip in de uiteindelijke kadering

Bekijk het geëxporteerde bestand in de uitsnede die je publiceert. Zet bij een bibliotheekpost in 9:16 de ondertitels onder de kin, zodat ze de mond niet kruisen. Controleer dat de ogen de lens nog ontmoeten na de uitsnede, dat de stem geen kamerruis heeft en dat de woorden in beeld bij de gesproken zin passen.

Kijk één keer voor de betekenis en één keer voor de mond. Een frame dat stilgezet scherp oogt, kan bij de start van de zin nog te laat voelen. Houd muziek onder de stem. Als de uitsnede de kraag aansnijdt, ga je terug naar het goedgekeurde stilstaande beeld.

Aan de slag op OmniArt

Genereer Mara als een origineel frontaal portret in de afbeeldingswerkruimte, met beide ogen en de mond vrij. Genereer de stem van één zin in de audiowerkruimte en bewaar die opname. Gebruik een videomodel alleen voor een korte bewegingstest van het stilstaande beeld. Rond de lipsynchronisatie af in een externe editor en bekijk daarna de uiteindelijke kadering met ondertitels op hun plek voordat je publiceert.