Voice Commands to Control Recording Sessions

In this report, the music recording workflow is described, with support for voice commands. Natural command grammars are proposed, allowing the user to name items, and issue commands on items identified by name. Recognition accuracy is examined within the contexts of single-phrase commands, and of versatile command grammars which enable the referring to items by name

Voiceye: A Multimodal Inclusive Development Environment

People with physical impairments who are unable to use traditional input devices (i.e. mouse and keyboard) are often excluded from technical professions (e.g. web development). Alternative input methods such as eye gaze tracking and speech recognition have become more readily available in recent years with both being explored independently to support people with physical impairments in coding activities. This paper describes a novel multimodal application (“Voiceye”) that combines voice input, gaze interaction, and mechanical switches as an alternative approach for writing code. The system was evaluated with non-disabled participants who have coding experience (N=29) to assess the feasibility of the application in writing HTML and CSS code. Results found that Voiceye was perceived positively and enabled successful completion of coding tasks. A follow-up study with disabled participants (N=5) demonstrated that this method of multimodal interaction can support people with physical impairments in writing and editing code

Proposition d'une aide logicielle pour la saisie d'information en situation dégradée : application à des utilisateurs IMC athétosiques dans des contextes liés au transport et aux activités journalières

The objective of the thesis is the study and development of a software aid named ComMob (Communication and Mobility) aimed at assisting disabled users when inputting information, nota-bly those with high mobility impairment. The thesis is in the field of Human-Computer Interaction, a particularly important area given that user interfaces are present on every device used continuously in all places (home, public places, offices ...). This research targets increased public transport use, better access to traveler information, and also daily activities of users with athetoid quadriplegic cerebral palsy. These users have difficulties performing actions with their arms because of frequent uncontrolled movements. In addition, they also have a dysarthria problem. The ComMob system uses pictograms to accelerate the input of sentences via different functions, including a program-ming aid. Several evaluations have been conducted in mobility situations and in laboratory condi-tions. Different research perspectives are also proposed.L’objectif de cette thèse était d’étudier et développer une aide logicielle, nommée ComMob (communication et mobilité), permettant d’aider l’utilisateur lors de la saisie d’information en situation dégradée, en se centrant sur des utilisateurs à fort handicap moteur. La thèse se situe dans le domaine de l’interaction homme-machine, domaine particulièrement important puisque les interactions homme-machine se déroulent désormais continuellement et en tous lieux (domicile, lieux publics, travail…). Sous l’angle applicatif, cette recherche est plus particulièrement centrée sur la mobilité, en lien avec les transports collectifs, l’accès aux informations voyageur, l’incitation à utiliser ceux-ci, tout en faisant le lien avec des activités journalières. Mais dans ce cadre on s’intéresse plus particulièrement aux utilisateurs de profil Infirme Moteur Cérébral de type tétraplégique athétosique ; ces utilisateurs éprouvant des difficultés à effectuer des actions à l’aide de leurs membres supérieurs à cause de fréquents mouvements parasites. De plus, ces personnes ont un problème de dysarthrie. Le système ComMob exploite des pictogrammes pour accélérer la saisie des phrases ; différentes fonctionnalités sont proposées incluant une aide à la programmation. Plusieurs évaluations ont été effectuées, aussi bien en mobilité qu’en laboratoire. Différentes pers-pectives de recherche sont également proposées