Nouvelles formes de communication et nouvelles interactions homme-machine pour enrichir et simplifier le quotidien Nicolas Roussel To cite this version: Nicolas Roussel. Nouvelles formes de communication et nouvelles interactions homme-machine pour enrichir et simplifier le quotidien. Interface homme-machine [cs.HC]. Université Paris Sud -ParisXI, 2007. tel-00280550 HAL Id: tel-00280550 https://tel.archives-ouvertes.fr/tel-00280550 Submitted on 19 May 2008 HAL is a multi-disciplinary open access L’archive ouverte pluridisciplinaire HAL, est archive for the deposit and dissemination of sci- destinée au dépôt et à la diffusion de documents entific research documents, whether they are pub- scientifiques de niveau recherche, publiés ou non, lished or not. The documents may come from émanant des établissements d’enseignement et de teaching and research institutions in France or recherche français ou étrangers, des laboratoires abroad, or from public or private research centers. publics ou privés. HABILITATION À DIRIGER DES RECHERCHES présentée par Nicolas Roussel Discipline : Informatique Spécialité : Interaction Homme - Machine Nouvelles formes de communication et nouvelles interactions homme-machine pour enrichir et simplifier le quotidien 7 décembre 2007 Ravin Balakrishnan University of Toronto Rapporteur François Bancilhon Mandriva Saul Greenberg University of Calgary Rapporteur Wendy Mackay INRIA Ian McClelland Philips Applied Technologies Laurence Nigay Université Joseph Fourier & IUF Rapporteur Philippe Palanque Université Paul Sabatier Tom Rodden University of Nottingham Habilitation à Diriger des Recherches préparée au sein du Laboratoire de Recherche en Informatique de l’Université Paris-Sud Résumé Mon domaine de recherche est l’Interaction Homme-Machine. Mes travaux dans ce do- maine s’organisent autour de deux axes. Le premier axe concerne la conception de systèmes interactifs pour la coordination, la communication et la collaboration entre individus. Je m’intéresse en particulier à la ma- nière dont des moyens vidéo peuvent être utilisés pour permettre des échanges plus subtils (i.e. légers, nuancés, implicites) et plus informels (i.e. spontanés, opportuns) que ceux permis par les systèmes actuels. Le deuxième axe concerne la conception de nouvelles métaphores et techniques destinées à enrichir et simplifier l’interaction au quotidien avec les systèmes informatiques. Je m’intéresse plus particulièrement aux moyens de faire évoluer la métaphore du bureau sous-jacente à la gestion des données et des applications dans la plupart des systèmes actuels. Ce document présente les problématiques liées à ces deux axes de recherche, les travaux s’y rapportant auxquels j’ai participé depuis septembre 2001 et quelques perspectives ouvertes par ces travaux. i Remerciements Merci à Michel Beaudouin-Lafon, Marie-Claude Gaudel, Wendy Mackay et Claude Puech qui ont su créer au sein de l’équipe Programmation et génie logiciel du LRI et du projet In Situ de l’INRIA des conditions de travail idéales. Merci à Ravin Balakrishnan, Saul Greenberg et Laurence Nigay, les rapporteurs de ce mé- moire. Merci également aux cinq autres membres du jury : François Bancilhon, Wendy Mackay (encore), Ian McClelland, Philippe Palanque et Tom Rodden. Merci aussi à Yan- nis Manoussakis, notre délégué aux thèses, pour ses encouragements et conseils avisés. Merci à Olivier Chapuis et aux nombreuses autres personnes avec lesquelles j’ai eu la chance de collaborer ces dernières années, parmi lesquelles : Caroline Appert, Guillaume Besacier, Stéphane Conversy, Loïc Dachary, Helen Evans, Jean-Daniel Fekete, Nicolas Gaudron, Sofiane Gueddana, Yves Guiard, Heiko Hansen, Catherine Letondal, Emma- nuel Nars, Emmanuel Pietriga, Wolfgang Stürzlinger, Aurélien Tabard, Martin Tomitsch, Frédéric Vernier. Merci enfin à Rosane, Maxime, Thaïs et Sophia, leur présence et leur patience contribuant grandement à l’enrichissement et à la simplification de mon quotidien. iii Table des matières 1 Introduction 1 2 Nouvelles formes de communication 5 2.1 Problématique . 6 2.1.1 Être là-bas .................................. 7 2.1.2 Être plus présent . 7 2.1.3 Être présent autrement . 8 2.1.4 Résumé des questions abordées . 10 2.2 Sondes technologiques et systèmes de communication pour l’environne- ment domestique . 12 2.2.1 VideoProbe . 13 2.2.2 MirrorSpace . 16 2.2.3 TableProbe . 19 2.2.4 Enseignements tirés . 20 2.3 Outils et interfaces pour la communication de groupe . 22 2.4 Vers une communication multi-échelles . 24 2.4.1 Variabilité de l’engagement dans MirrorSpace, VideoProbe et Vi- deoServer . 26 2.4.2 Systèmes de communication multi-échelles . 28 v vi TABLE DES MATIÈRES 2.4.3 Pêle-Mêle . 29 3 Nouvelles interactions homme-machine 33 3.1 Problématique . 34 3.1.1 Un bureau encombré . 34 3.1.2 Des interfaçes peu adaptées et difficilement adaptables . 36 3.1.3 Des armoires qui débordent . 37 3.1.4 Résumé des questions abordées . 38 3.2 Outils et techniques d’interaction pour un nouveau bureau informatique . 40 3.2.1 Metisse . 41 3.2.2 Façades interactives . 45 3.2.3 Rock and roll ! . 50 3.3 Vers une mémoire épisodique informatique . 53 3.3.1 Mémoire épisodique et interaction homme-machine . 54 3.3.2 PageLinker . 57 4 Conclusions et perspectives 61 4.1 Pour la communication médiatisée . 61 4.2 Pour l’interaction homme-machine . 63 Bibliographie 65 Sélection d’articles de recherche 81 C-1 - Technology Probes : Inspiring Design for and with Families . 83 C-2 - Proximity as an interface for video communication . 91 C-3 - Pêle-Mêle, a video communication system supporting a variable degree of engagement . 97 C-4 - Beyond "Beyond being there" : towards multiscale communication systems 101 vii I-1 - Ametista : a mini-toolkit for exploring new window management techniques111 I-2 - Metisse is not a 3D desktop ! . 119 I-3 - User Interface Façades : Towards Fully Adaptable User Interfaces . 129 I-4 - Copy-and-Paste Between Overlapping Windows . 139 I-5 - PageLinker : Integrating Contextual Bookmarks into a Browser . 149 Table des figures 1.1 Exemples d’intégration des services de videoServer . 2 1.2 Le Puits, concept et prototypes . 3 1.3 Le bureau informatique comme source d’images . 3 2.1 Picturephone . 5 2.2 Coliseum et Twister . 8 2.3 inTouch, FeelLight et Nabaztag . 9 2.4 VideoProbe . 14 2.5 Transitions entre les différents modes de VideoProbe . 14 2.6 Vieillissement des photos capturées par VideoProbe . 14 2.7 Exemples de communications explicite et implicite avec VideoProbe . 15 2.8 Voir plus loin, voir trop loin, ne pas être vu d’assez prês . 17 2.9 MirrorSpace . 18 2.10 Exemples d’images affichées pas MirrorSpace . 18 2.11 CVR . 20 2.12 TableProbe et StoryTable . 20 2.13 Exemples de cartes FamilyNet . 23 2.14 Degré d’engagement . 25 ix x Table des figures 2.15 Exemple d’exposition s’élective à travers VideoServer . 27 2.16 Pêle-Mêle . 30 2.17 Exemples de filtres utilisés par Pêle-Mêle . 30 3.1 Interface graphique du Star . 33 3.2 Fold n’ Drop et Task Gallery . 35 3.3 Interface de personnalisation de Microsoft Word 2004 . 37 3.4 Prototypes de bureau réalisés en 2000, 2001 et 2002 . 40 3.5 Architecture du système Metisse . 42 3.6 Métaphore papier augmentée et bureau 3D zoomable . 43 3.7 Transformations dépendantes de la position . 44 3.8 Exemple de création d’une façade interactive . 47 3.9 Flux d’information associés à une façade interactive . 47 3.10 Exemple de substitution d’interface . 49 3.11 Changement d’ordre lors d’une opération de copier-coller . 50 3.12 Opérations utilisée dans les quatre principales techniques de copier-coller . 52 3.13 Restack et Roll ..................................... 52 3.14 Exemple de visualisation interactive de flux d’événements . 56 3.15 PageLinker . 58 Chapitre 1 Introduction Mon domaine de recherche est l’Interaction Homme-Machine. Ce domaine couvre à la fois la conception, la mise en oeuvre et l’évaluation de systèmes informatiques interactifs destinés à des utilisateurs humains [Hewett et al., 1992]. Une première partie de mes tra- vaux porte sur la conception de systèmes propres à la coordination, à la communication ou à la collaboration entre individus. Dans ce contexte, je m’intéresse plus particuliè- rement à l’utilisation d’images fixes ou animées montrant ces individus ainsi que leurs environnements physique et informatique immédiats. Parallèlement à ces travaux liés à une utilisation collective de l’informatique, je m’intéresse également à la conception de nouvelles métaphores et techniques destinées à enrichir et simplifier de manière signifi- cative l’interaction entre l’homme et les systèmes informatiques. Ce mémoire décrit les travaux de recherche que j’ai effectués au sein de l’équipe Pro- grammation et Génie Logiciel du Laboratoire de Recherche en Informatique (LRI) depuis mon recrutement comme Maître de Conférences à l’Université Paris-Sud, en septembre 2001, et en tant que membre du projet In Situ de l’INRIA depuis sa création en jan- vier 2002. Ces travaux s’inscrivant dans la continuité de mes travaux antérieurs, il me semble toutefois utile de revenir brièvement sur quelques éléments mentionnés dans ma thèse [Roussel, 2000a]1. Mes recherches sur les usages de la vidéo pour la communication médiatisée ont été en grande partie inspirées des travaux sur les mediaspaces, des systèmes qui assistent un groupe de personnes dans leurs activités quotidiennes en “augmentant” l’espace phy- sique par des moyens audio et vidéo [Bly et al., 1993, Mackay, 1999]. Durant ma thèse, je me suis ainsi intéressé aux problèmes techniques et sociaux posés par ces systèmes, comme la difficulté de déploiement à grande échelle et l’exposition de la vie privée qui en résulte. Ce travail s’est concrétisé par la réalisation de deux nouveaux systèmes, Medias- cape et videoServer [Roussel, 1999, Roussel, 2000b]. Accessibles simplement à travers un protocole basé sur HTTP (Fig. 1.1), ces systèmes permettent de jeter un coup d’œil dans un espace distant ou de partager cet espace pendant plusieurs heures, jours ou mois.