Description des tâches avec un système interactif multiutilisateur et multimodal : Etude comparative de notations

International audienceMulti-user multimodal interactive systems involve multiple users who can use multiple interactionmodalities. Multi-user multimodal systems are becoming more prevalent, especially systems based on largeshared multi-touch surfaces or video game centers such as Wii or Xbox. In this article we address thedescription of the tasks with such interactive systems. We review existing notations for the description of taskswith a multi-user multimodal interactive system and focus particularly on tree-based notations. For elementarytasks (e.g. actions), we also consider the notations that describe multimodal interaction. The contribution isthen a comparison of existing notations based on a set of organized concepts. While some concepts are generalto any notation, other concepts are specific to human-computer interaction, or to multi-user interaction andfinally to multimodal interaction.De nombreux systèmes interactifs, professionnels ou grand public, permettent conjointementl’interaction multiutilisateur et multimodale. Un système interactif est multimodal lorsqu’un utilisateur peutinteragir avec le système par l’usage de plusieurs modalités d’interaction (en entrée ou en sortie) de façonparallèle ou non. Nous constatons que de plus en plus de systèmes multiutilisateurs ou collecticiels sontmultimodaux, comme ceux construits autour d’une surface interactive et les consoles de jeu de type Wii ouXbox. Nous traitons dans cet article de la description des tâches-utilisateur avec de tels systèmes interactifsmultiutilisateurs et multimodaux. Précisément, nous dressons un panorama des notations existantes permettantla description des tâches mono ou multi-utilisateur avec une attention particulière pour les notations à based’arbre de tâches. Nous focalisons aussi sur les tâches élémentaires ou actions mono/multi-modales del’utilisateur en considérant les notations de description de l’interaction multimodale. Pour cela, nousproposons une étude comparative d'un ensemble de notations de description selon une grille d’analyseregroupant des concepts généraux à l’interaction et des concepts propres à l’interaction multiutilisateur etmultimodale

Chapitre 5. Co-élaboration de solutions et rôle du graphico-gestuel : comparaison méthodologique

National audienceIn this chapter, we chose to address the two areas covered by MOSAIC, that is, the analysis of interactions and the cognitive ergonomic psychology, through a methodological comparison. This undertaking is particularly interesting because of the work on a common data corpus, collected to meet the needs of both. It is particularly meaningful since, in both disciplines, tools were developed to address meetings involving various expertises, which confront and co-construct representations, and manage disagreements (see Chapters 1 and 2 of the book ). It especially allows us to indulge in a "practical" confrontation. Indeed, much discussion in the MOSAIC project has involved comparison through a theoretical approach, based on presentations of the respective methodologies, their questions and their objects. These presentations were usually made on the basis of data analyses, but data only known to the analyst. For interesting they were, these discussions have not always made possible to see emerge a common horizon in the research questions and points of interest, which yet are close. One of the most important contributions of this preparatory work has undoubtedly been to compel a more detailed explanation of the background and theoretical implications of the methodologies. With this in mind we have designed this chapter to continue this work of clarification and exchange through the practice of data analysis. The common question that has oriented the two analyses, and serves as tertium comparationis for the methodological comparison, is the designers' co-elaborating solutions. This questions created also the possibility for both authors to take into account the graphico-gestural in their analyses.Dans ce chapitre, nous avons choisi d'aborder les deux domaines concernés, l'analyse des interactions et la psychologie ergonomique cognitive, à travers une comparaison méthodologique. Cette entreprise est intéressante particulièrement du fait du travail sur un corpus commun, collecté pour répondre aux besoins des uns et des autres. Elle prend tout son sens puisque, dans les deux champs disciplinaires, des outils ont été développés pour aborder les réunions multicompétences, où se confrontent et se co-construisent des représentations, et se gèrent des désaccords (voir chapitres 1 et 2 de l'ouvrage). Elle nous permet surtout de nous livrer à une confrontation "pratique". En effet, un grand nombre de discussions au cours du projet MOSAIC a concerné la confrontation sur un mode théorique, à partir de présentations des méthodologies respectives, de leurs questions et de leurs visées. Ces présentations ont le plus souvent été effectuées sur la base d'analyses de données, mais de données connues de l'analyste seul. Pour intéressantes qu'elles aient été, ces discussions n'ont pas toujours permis de voir se dégager un horizon commun dans les questions de recherche et dans des points d'intérêt pourtant proches. Un des apports les plus importants de ce travail préparatoire a sans aucun doute été de contraindre à une explicitation plus précise des arrières plans et des implications théoriques des méthodologies. C'est dans cette perspective que nous avons conçu le présent chapitre afin de poursuivre ce travail d'explicitation et d'échange à travers la pratique de l'analyse de données. La perspective comparative porte sur les analyses effectuées selon deux approches correspondant à deux domaines. La question commune qui a conduit les deux analyses, et qui sert de tertium comparationis pour la comparaison méthodologique, est celle de la co-élaboration de solutions

Interaction gestuelle à une main avec un smartphone : retours utilisateurs et application aux picophones

This paper presents a one-handed gesture command for the interaction with a picophone and any mobile device. We present an algorithm of 3D gesture recognition based on the filtering of accelerometer data. An experiment is detailed which shown the robustness of the gesture detection as well as the interest of such a one-handed command. At last, we report an application of this work with a picophone

Guide de conception d'une technique de désignation 3D

National audienceNous présentons un tour d'horizon des techniques de désignation existantes en IHM, aussi bien en 2D qu'en 3D. Leur analyse nous a permis de proposer un guide de conception d'une technique de désignation 3D pour les développeurs d'environnements virtuels. Une illustration de cette méthode est proposée avec le pointage sémantique en 3D

Les enfants ayant un trouble envahissant du développement en contexte de services de garde inclusifs : la nature des interactions sociales lors des périodes de jeu libre

L'objectif de cette thèse est de décrire et d'analyser la nature des interactions sociales qui sont présentes entre les enfants ayant un trouble envahissant du développement (TED) et les enfants à développement typique, lors des périodes de jeu libre, en contexte de services de garde inclusifs, ceci afin de cerner les facteurs induits du contexte d'inclusion qui incitent les enfants ayant un TED à interagir avec leurs pairs à développement typique. La présente recherche exploite un devis de recherche qualitatif, soit l'étude de cas multiple. Les résultats issus de l'observation directe comprennent l'analyse qualitative des données et le traitement quantitatif de ces données. Les résultats de l'analyse qualitative permettent de mieux comprendre les facilitateurs des interactions sociales. Les résultats du traitement quantitatif des données qualitatives permettent de dresser un portrait du jeu social, du jeu cognitif et des comportements d'interactions sociales avec les pairs et l'éducatrice pour chacun des enfants observés. Un des principaux constats qui ressort de l'observation des enfants ayant un TED en contexte naturel est qu'ils s'engagent davantage en interaction sociale avec leurs pairs à développement typique qu'avec les éducatrices. La notion d'environnement de jeu ressort aussi de cette recherche comme étant essentielle à prendre en compte pour favoriser la mise en place d'interactions sociales entre les enfants ayant un TED et leurs pairs à développement typique. En effet, les notions de proximité, d'objet de jeu commun, de type de jeu ressortent comme facteurs permettant aux enfants d'initier et de maintenir des interactions sociales. Les résultats concernant l'imitation motrice ont permis de comprendre que les enfants ayant un TED utilisent les deux fonctions de l'imitation motrice, soit la fonction instrumentale et la fonction sociale, mais dans des contextes différents.\ud ______________________________________________________________________________ \ud MOTS-CLÉS DE L’AUTEUR : Services de garde, Inclusion, Troubles envahissants du développement, Interactions sociales, Jeu libre