Tangible and tactile interaction techniques for multimedia systems

• Auteur / Autrice : Tahir Muhammad
• Direction : Eric Lecolinet
• Type : Thèse de doctorat
• Discipline(s) : Informatique et réseaux
• Date : Soutenance en 2009
• Etablissement(s) : Paris, ENST

Mots clés

Mots clés contrôlés

Interaction humain-machine

Multimédias interactifs

Résumé

Un système multimédia intègre différents types d’éléments comme le texte, l’audio, la vidéo, le graphique, etc. Cette diversité de données est obtenue à partir d'une variété de dispositifs multimédias (tels que les téléviseurs, lecteurs de DVD, iPods, etc. ) qui peuvent contenir des centaines de chaînes de télévision ou des milliers de chansons et d'images auxquelles on souhaite accéder rapidement et efficacement. De plus, les utilisateurs qui manipulent ces données ont parfois besoin de retours non-visuels et non-intrusifs. Dans ce contexte, cette thèse en Interaction Homme Machine (IHM) explore l'interaction tangible et tactile pour résoudre ces problèmes. Nous avons tout d’abord étudié les techniques d’interfaces tangibles et avons developpé différentes techniques d'interaction et outils. Les techniques de type « selection-box » utilisent des mouvements de translation de marqueurs tangibles pour naviguer et sélectionner dans des listes de chaînes de télévision. L'outil tangible ARemote permet d’explorer une liste d’éléments multimédia à l'aide de gestes de rotation, de défilement et de crossing. Nous avons ensuite exploré l’utilisation du retour tactile et défini différentes catégories d’icones tactiles. Nous avons testé ces catégories sur un dispositif nommé TactiMote que nous avons developpé pour permettre la navigation et sélection non-visuelle dans des listes de chaînes de télévision favorites et non-favorites. Enfin, nous avons également développé une technique d'interaction tactile pour terminaux mobiles nommée TactiPod qui permet la sélection non-visuelle de favoris et non-favoris en se basant sur la valeur absolue et relative des gestes des doigts.

A multimedia system involves the combination of different elements such as text, audio, video, graphics, etc. This diversity of data reflects the variety of multimedia devices (such as TVs, DVD players, IPods, etc. ) which often contains hundreds of TV channels, thousands of songs and images that need to be accessed quickly and efficiently. Moreover, users manipulating such data sometimes require non-visual and non-intrusive feedback. In the said context, this thesis in Human Computer Interaction (HCI) explores tangible and tactile interaction to help alleviating these issues. On the one hand, we investigated the techniques of Tangible User Interfaces (TUIs) and developed different interaction techniques and tools. The selection-box techniques control a list of multimedia items by using translational movements of tangible markers while the ARemote tangible tool handles a list of multimedia items by using rotational gestures, scrolling and crossing techniques. On the other hand, we explored tactile feedback and defined various categories of tactile patterns. We tested these categories on a tactile device named TactiMote, which we developed in order to navigate and select non-visually favorite and non-favorite TV channels. Finally, we developed a tactile technique for handheld devices, named TactiPod, which is based on the idea of using absolute and relative positions of a finger for selecting items in a list of favorite and non-favorites.