Interfaces homme-machines multimédias : conception d'applications éducatives adaptées à l'autisme de haut niveau
Institution:
Paris 11Disciplines:
Directors:
Abstract EN:
Psychopathologists express growing interest in the use of computers for special education of people with autism. Our research aims at providing design guidelines for educational software dedicated to specialized teaching for autism. This exploratory investigation relies on an experimental protocol focusing on the study of two dimensions: the domain of learning targeted by educative games (spatial planning versus dialogue understanding) and modalities used in Human Computer Interfaces (HCI). We designed computer games that were tested with 10 teenagers diagnosed with high functioning autism. The subjects' skills were assessed before and after a training period. During evaluation phases, we also controlled for the impact of multimodal as compared to minimalist, task oriented interfaces. Moreover, different HCI were tested during training. The experiment comprised 13 sessions, at the rate of one session per week. We replicated the experiment with a control group of 10 children without autism. A software platform was developed to control HCI modalities and to log users' actions. Moreover, we annotated video recordings of two sessions with the subjects with autism. Results led to underline the role played by executive functions during the interaction with a computer. They also tended to show that multimodality is not necessarily an advantage for people with autism.
Abstract FR:
Les spécialistes de l'autisme portent un intérêt grandissant pour l'éducation spécialisée assistée par ordinateur. L'objectif de notre recherche est d'aboutir à des recommandations pour la conception de logiciels éducatifs spécialisés pour l'autisme. Cette étude exploratoire s'appuie sur un protocole expérimental permettant d'étudier deux dimensions : le domaine d'apprentissage ciblé par les jeux éducatifs (la planification spatiale versus la compréhension de dialogues), et les modalités utilisées dans l'Interface Homme Machine (IHM). Nous avons spécifié et développé des jeux informatisés que nous avons testés avec 10 adolescents autistes de haut niveau. L'apprentissage était évalué par comparaison entre les performances avant et après une période d'entraînement. Lors des évaluations, une interface multimodale spécifique à chaque exercice était comparée avec une interface minimaliste comportant moins de modalités, mais suffisamment pour résoudre l'exercice. En outre, différentes IHM ont été testées au cours de l'entraînement. Le protocole est composé de 13 sessions, à raison d'une session par semaine. Nous avons répliqué l'expérience avec un groupe contrôle de 10 enfants sans autisme. Nous avons développé une plate-forme informatique qui permettait de contrôler les modalités des IHM et d'enregistrer les actions des utilisateurs. En outre, nous avons annoté les enregistrements vidéos de deux sessions avec les sujets autistes. Les résultats ont permis de mettre en évidence le rôle joué par les fonctions exécutives dans l'activité informatique. Ils tendent à montrer également que pour les personnes autistes, la multimodalité n'apparaît pas forcément comme un avantage.