Voorbij het realisme: digitale mensen sociaal intelligent maken

Digitale mensen sociaal intelligent maken

Dankzij recente ontwikkelingen in computergraphics hebben 3D-digitale mensen een indrukwekkend niveau van visueel realisme bereikt. Ze worden steeds vaker geïntegreerd in diverse toepassingen, waaronder videogames, chatbots voor klantenservice en financiën, simulaties in het onderwijs en de gezondheidszorg, communicatie op afstand en social extended reality (XR).

Hun vermogen om op een natuurlijke manier te interacteren en te bewegen binnen sociale contexten blijft echter beperkt. Als mensen zijn we zeer gevoelig voor non-verbaal gedrag in emotionele en sociale interacties. Om op een natuurlijkere manier met ons in contact te komen, moeten virtual humans beschikken over non-verbale communicatievaardigheden zoals gezichtsuitdrukkingen, gebaren en blik.

Naarmate ze in meer interactieve omgevingen worden ingezet, groeit de vraag om hun gedrag automatisch en in realtime te genereren. Toch blijft het vastleggen en synthetiseren van de genuanceerde, individuele aard van non-verbaal gedrag een aanzienlijke uitdaging, belemmerd door beperkingen in de beschikbaarheid van data, de complexiteit van algoritmen en evaluatiemethodologieën.

In deze lezing licht ik toe hoe AI en deep learning-technieken – met name die gebruikmaken van motion capture-technologie – kunnen worden gebruikt om het non-verbale gedrag van digitale mensen te modelleren en te genereren. Ik presenteer de stand van zaken, belicht ons recente onderzoek en bied een kritische analyse van huidige evaluatiepraktijken in de synthese van non-verbaal gedrag.