Présentation multimodale et contextuelle de l'information
Institution:
Paris 11Disciplines:
Directors:
Abstract EN:
This thesis deals with Human-Computer Interaction and involves two subjects: output multimodality and interaction adaptation. The contextualization of the output user interface aims at adapting the information presentation to the context. This adaptation requires new concepts including the interaction context in the design and evolution processes of a multimodal presentation. We propose a conceptual model called WWHT for a dynamic and "intelligent" multimodal presentation of information. The WWHT model is based on four concepts: "What", "Which", "How" and "Then”, that describe the steps of the life cycle of a multimodal presentation. These concepts extend existing works by strengthening the contextualization mechanisms and completing the life cycle of multimodal presentations. On the basis of these four concepts, we propose a software platform called ELOQUENCE that supports an iterative design of output multimodal systems. This platform helps the designer in each step of the design process by proposing a set of tools allowing the specification, simulation and execution of the system outputs. Finally, we describe three applications of the resulting framework: a mobile phone simulator, a military avionic simulator and an air traffic control system. These applications define a software validation process to check our approach genericity and usability. Encouraging preliminary results have been obtained and open new perspectives on multi-user interaction and ambient computing.
Abstract FR:
Cette thèse s’inscrit dans le domaine de la communication Homme-Machine et plus précisément dans celui de la multimodalité en sortie. Elle a pour thème l’adaptation des sorties d’un système multimodal au contexte d’interaction. Les travaux de recherche présentés décrivent les problèmes rencontrés dans la conception d’une présentation multimodale et contextuelle de l’information et proposent une approche de résolution conceptuelle et logicielle. Ce travail se divise en trois phases. La première, introduit le modèle conceptuel WWHT permettant une présentation adaptée de l’information. Ce modèle s’appuie sur quatre concepts fondamentaux : "What", "Which", "How" et "Then", annotant les évènements marquants du cycle de vie d’une présentation multimodale. Ces concepts structurent les processus de conception et d’évolution de la présentation en intégrant le contexte d’interaction dans leurs mécanismes de décision. Inspirée de ce modèle, la seconde phase introduit une plateforme logicielle permettant la conception itérative des sorties d’un système multimodal. Cette plateforme intitulée ELOQUENCE accompagne le concepteur tout au long du processus de conception, en outillant les différentes phases de son cycle de vie. Une dernière phase applique cet environnement de conception à trois applications de domaines différents : téléphonie mobile, avionique militaire et contrôle aérien. Ces applications incarnent un processus de validation logicielle visant à évaluer incrémentalement la faisabilité des concepts émis. De ces expérimentations ressortent des résultats encourageants, ouvrant de nouvelles perspectives sur l’interaction multi-utilisateur et l’informatique ambiante.