Partner, a multimodal man-machine dialogue system for goal-oriented applications with a speech emphasis
Partner, un système de dialogue homme-machine multimodal pour applications finalisées à forte composante orale
Abstract
Not available
L'objet de notre étude porte sur l'élaboration d'un système générique de dialogue homme-machine multimodal, le système Partner. Ses objectifs portent d'une part sur la création d'une interface multimodale conviviale et robuste, et d'autre part sur la définition d'une architecture propre à faciliter le développement d'applications variées. Sa contribution se situe dans le cadre d'applications finalisées. L'interface multimodale qu'il fournit, permet à un utilisateur coopératif de communiquer naturellement avec une application au moyen de la parole, mais aussi au moyen d'autres périphériques comme une souris, un écran tactile et un clavier. Un modèle sémantique multimodal est utilisé pour assurer l'indépendance du système vis-à-vis des périphériques d'entrées/sorties et de la langue. L'approche de Partner est basée sur une analyse des besoins interactionnels des applications qui a conduit à l'identification d'invariants dialogue. Il se caractérise par une architecture originale qui est de type client/serveur. Elle correspond à une décomposition de l'activité de communication en deux domaines d'expertise qui permet de décharger les applications des aspects interactionnels du dialogue pour que celles-ci puissent se focaliser sur leur tache. Un environnement de développement (toolkit dialogue) est mis à la disposition des concepteurs d'applications. Pour assurer une interaction conviviale et robuste, le système fournit également des mécanismes pour la gestion d'erreurs et d'incertitudes, et propose différentes solutions pour assister les utilisateurs dans leur interaction avec la machine. Partner est un système de dialogue opérationnel qui a donne lieu, à ce jour, à la réalisation de trois applications qui fonctionnent en temps réel et en plusieurs langues