Evaluation de personnages virtuels interactifs

1. Evaluation de personnages virtuels interactifs Stéphanie Buisine Arts et Métiers ParisTech

2. évaluation de personnages virtuels interactifs • 2 facteurs indépendants Graphisme, animation, dialogue, IA, détection, interprétation des émotions… Performance technique Exemple : IVA 2008 Motivation, performance à une tâche, fonctions cognitives (résolution pb, apprentissage, mémorisation…) Utilité Van Mulken et al., 1998 Moreno et al., 2001 Ryokai et al., 2003 Beun et al., 2003 …

3. Protocoles • Performance technique • Protocole de vérification • Protocole de comparaison • Utilité • Interaction réelle ou simulée (mais pas obligatoire) • Contextualisation dans une tâche • Protocole de comparaison à une condition contrôle sans agent •  Protocoles plus coûteux

4. 2 facteurs indépendants • Indépendants? Performance technique Hypothèse d’interaction [Dehn & Van Mulken, 2000; Buisine, 2005] Utilité

5. Variables collectées • Comportement • Réactions, • Temps passé, • Stratégies, • Modalités de communication, • Oculométrie, • Fluidité de la communication… • Expérience subjective • Interviews, questionnaires • Performance • Indices psychophysiologiques • Interaction avec variables individuelles : âge, sexe, CSP, personnalité…

6. recommandations • Dehn & Van Mulken (2000) The impact of animated interface agents: A review of empirical research. Int. J. Human-Computer Studies, 52, 1-22. • Recommandations méthodologiques restent valables pour la plupart: • Ne faire varier qu’un facteur à la fois • Opérationnaliser des variables cohérentes • Utiliser des analyses statistiques / probabilistes • Interpréter les données en fonction de modèles théoriques (ex: interprétation d’un temps de réaction comme indice attentionnel) • Tester les effets à long terme