Affective Avatars
Animation comportementale d’avatars anthropomorphiques. Développement d’une nouvelle génération d'Avatars expressifs et affectifs animés en temps réel et pilotés à la voix : humaniser les avatars qui nous représentent dans les mondes virtuels.
Porteur
LIMSI-CNRSContact : Laurence Devillers - devil@limsi.fr - Tel. : 0169858062
Partenaires
Voxler, Cantoche (PME), IRCAM (Établissements publics)
Domaine
Image, Son, Interactivité
AAP
ANR 2007
Résumé
Le projet vise à développer le réalisme comportemental et l'expressivité d’avatars pour améliorer les interactions et la communication dans les services en ligne internet et mobile où les utilisateurs sont représentés par des personnages de synthèse, des avatars. Il s’agit de construire la cohérence multimodale entre l'analyse de l'expressivité vocale de l'utilisateur et la synthèse gestuelle de l'avatar : labiale, faciale et gestuelle (postures, regards, gestes de la main, mouvements de la tête, etc.). La voix de l'utilisateur est l'interface de contrôle de cette expressivité. Le timbre vocal de l'utilisateur est également traité en temps réel pour donner à l'avatar une voix cohérente.
Objectif Sectoriel
L’application d’Avatars Affectifs dans les services en ligne ou les utilisateurs sont représentés par des personnages de synthèse, des avatars.
Contenus Technologiques
Nous adressons quatre verrous scientifiques/technologiques dans ce projet: 1/ Détection d'émotions dans la voix humaine 2/ Modélisation de l'expressivité corporelle 3/ Transformation du timbre vocal en temps réel 4/ Expressivité et cohésion multimodale.
Philosophie / Démarche
Notre démarche est de construire la cohérence multimodale entre l'analyse de l'expressivité vocale de l'utilisateur et la synthèse gestuelle de l'avatar : labiale, faciale et gestuelle (postures, regards, gestes de la main, mouvements de la tête, etc.)
Enjeux
Humaniser les avatars qui nous représentent dans les mondes virtuels.
Nouveaux Produits/Services à Court/Moyen Terme
La création d’avatars expressifs pour les services en ligne Internet et mobiles.
Principes Structurants
Notre projet est une contribution essentielle à « L'animation comportementale d’avatars anthropomorphiques »
Description / Étapes
Les étapes correspondent aux quatre verrous scientifiques/technologiques :
1/ Détection d'émotions dans la voix humaine
2/ Modélisation de l'expressivité corporelle
3/ Transformation du timbre vocal en temps réel
4/ Expressivité et cohésion multimodale
Résultats / Livrables
La dimension temps réel et l'interopérabilité logicielle sont au cœur du projet pour modulariser les résultats en librairies ouvertes et intégrables dans différents environnements, réseaux et équipements.
Retour