Analyse acoustique de la voix émotionnelle de locuteurs lors d'une interaction humain-robot

Mes travaux de thèse s'intéressent à la voix émotionnelle dans un contexte d'interaction humain-robot. Dans une interaction réaliste, nous définissons au moins quatre grands types de variabilités : l'environnement (salle, microphone); le locuteur, ses caractéristiques physiques (genre, âge, type de voix) et sa personnalité; ses états émotionnels; et enfin le type d'interaction (jeu, situation d'urgence ou de vie quotidienne). A partir de signaux audio collectés dans différentes conditions, nous avons cherché, grâce à des descripteurs acoustiques, à imbriquer la caractérisation d'un locuteur et de son état émotionnel en prenant en compte ces variabilités.Déterminer quels descripteurs sont essentiels et quels sont ceux à éviter est un défi complexe puisqu'il nécessite de travailler sur un grand nombre de variabilités et donc d'avoir à sa disposition des corpus riches et variés. Les principaux résultats portent à la fois sur la collecte et l'annotation de corpus émotionnels réalistes avec des locuteurs variés (enfants, adultes, personnes âgées), dans plusieurs environnements, et sur la robustesse de descripteurs acoustiques suivant ces quatre variabilités. Deux résultats intéressants découlent de cette analyse acoustique: la caractérisation sonore d'un corpus et l'établissement d'une liste "noire" de descripteurs très variables. Les émotions ne sont qu'une partie des indices paralinguistiques supportés par le signal audio, la personnalité et le stress dans la voix ont également été étudiés. Nous avons également mis en oeuvre un module de reconnaissance automatique des émotions et de caractérisation du locuteur qui a été testé au cours d'interactions humain-robot réalistes. Une réflexion éthique a été menée sur ces travaux.This thesis deals with emotional voices during a human-robot interaction. In a natural interaction, we define at least, four kinds of variabilities: environment (room, microphone); speaker, its physic characteristics (gender, age, voice type) and personality; emotional states; and finally the kind of interaction (game scenario, emergency, everyday life). From audio signals collected in different conditions, we tried to find out, with acoustic features, to overlap speaker and his emotional state characterisation taking into account these variabilities.To find which features are essential and which are to avoid is hard challenge because it needs to work with a high number of variabilities and then to have riche and diverse data to our disposal. The main results are about the collection and the annotation of natural emotional corpora that have been recorded with different kinds of speakers (children, adults, elderly people) in various environments, and about how reliable are acoustic features across the four variabilities. This analysis led to two interesting aspects: the audio characterisation of a corpus and the drawing of a black list of features which vary a lot. Emotions are ust a part of paralinguistic features that are supported by the audio channel, other paralinguistic features have been studied such as personality and stress in the voice. We have also built automatic emotion recognition and speaker characterisation module that we have tested during realistic interactions. An ethic discussion have been driven on our work.PARIS11-SCD-Bib. électronique (914719901) / SudocSudocFranceF

Reconnaissance automatique des émotions à partir du signal acoustique

Nous nous intéressons à la détection automatique des appels problématiques dans un contexte réel de centres d'appels téléphoniques. Nous utilisons l'information sur l'état émotionnel du locuteur, véhiculée par le signal acoustique, pour détecter les problèmes de compréhension entre un locuteur et un système de dialogue humain-machine. Notre contribution se situe à deux niveaux. Au premier niveau, nous avons développé un système de reconnaissance automatique des émotions (RAE) basé sur les traits de type MFCC, avec la célérité et l'accélération, extraits au niveau d'une trame, analysés à l'échelle d'un énoncé, et modélisés par un mélange de gaussiennes. Nous avons optimisé les performances de ce système en ajustant trois types de paramètres : le nombre de mélanges de gaussiennes, l'utilisation de coefficients MFCC d'ordre supérieur (20 versus 13 coefficients) et l'utilisation d'un modèle du monde (UBM) pour l'entraînement des modèles GMM. Le système a été entraîné et testé pour reconnaître les classes des émotions du corpus de données LDC Emotional Prosody (LDC). D'après les résultats obtenus, nous avons apporté une amélioration de l'ordre de 11% par rapport aux meilleurs résultats de l'état de l'art utilisant le même corpus de données pour l'expérience neutre vs tristesse alors que nous avons reproduit les meilleures performances pour l'expérience neutre vs colère et pour rexpérience avec 15 classes d'émotions. Notre seconde contribution est l'expérimentation d'un nouveau modèle de système de RAE basé sur l'information prosodique à long terme obtenue par une approximation des courbes de l'énergie et de la fréquence fondamentale par des coefficients de polynômes de Legendre sur une échelle d'analyse appelée pseudosyllabe. Afin de mesurer l'efficacité de ce type de trait à long terme et de l'unité d'analyse, nous avons réalisé une comparaison de performance entre ce système et un système exploitant l'information prosodique à court terme (niveau de trame) sur l'échelle d'un énoncé. Les taux de reconnaissance obtenus avec"un système basé sur la pseudosyllabe et les coefficients de polynômes de Legendre et expérimenté avec le corpus LDC, sont nettement supérieurs à ceux d'un système basé sur Vénoncé et l'information à court terme. Le gain relatif réalisé est de l'ordre de 6% pour la reconnaissance des émotions neutre vs colère, tandis que ce gain est de l'ordre 91% pour neutre vs tristesse. Enfin, nous avons obtenu une amélioration de l'ordre de 41% pour la détection de 15 classes d'émotions

Favoriser la construction d’un collectif apprenant : les conditions organisationnelles du développement des compétences d’un collectif éphémère

The present research is developed to identify the organizational conditions that create and develop teamwork oriented to learn at the national Forest Fire Control and Coordination Centre in Chile. The aim is to set up the operational configuration of a temporary team in order to give its members the knowledge to manage and deal with dynamic, complex and potentially risky situations. In this context, the quick training of novices and the updating of knowledge and know-how of experienced workers is an important issue for both developing operator skills and operationalizing the collective. Using an ethnomethodology approach based on the theories of situated action and distributed social cognition we have analyzed the formal learning process at the beginning of the forest fire season and the informal learning strategies developed during the season in order to operationalize an heterogeneous team. We also have analyzed the role of each team member and the assistance provided by each in order to help others learn and become a high performance team member.Several strategies are employed during the two periods of the season. We observed an active participation of members of the team, self-organization, and mutual support not only in order to fulfill the task, but also in order to exploit opportunities for learning from experience. We also have found seven different kinds of behaviour and verbal interaction aimed at learning while on the job, identified as accelerator of training, learning and knowledge recovery. Some of them proved to be most used in calm periods of the work day, while others were used during the management of forest fires. By the end of the season, all strategies tended to be less frequent.It is possible to identify an organizational strategy aimed at creating environments that allow a community of practice in action to be created, that contribute to the construction of a collective and to the development of a collective competence, the “épistèmo-vigilance” that exploits both the constructive and productive dimension of the activity. All of those strategies allow them to deal with risky dynamic work environments, to establish a high-performance team and to set an enabling work environment.Cette recherche cherche à identifier les conditions organisationnelles contribuant à la création et au développent d’un collectif apprenant dans un centre de coordination et contrôle des feux de forêt au Chili. L'objectif poursuit est de rendre opérationnel un équipe temporaire visant à gérer des situations dynamiques, complexes et potentiellement risquées. Dans ce contexte, la formation rapide des novices et la mise à jour des savoirs et des savoir-faire des opérateurs expérimentés constitue un enjeu important pour le développement des compétences et pour devenir un collectif opérationnel. À travers d’un approche ethnométhodologie et en utilisant les théories d'action située, de la cognition distribuée et de la cognition sociale distribuée nous avons analysé le processus d'apprentissage formel au début de la saison ainsi que les stratégies d'apprentissage informelle développés cours de la saison afin d'opérationnaliser une équipe hétérogène. Nous avons également analysé le rôle de chaque membre de l'équipe et l’assistance mutuelle fournie visant à apprendre entre eux et pour devenir un collectif efficace.Plusieurs stratégies sont mobilisées pendant les deux périodes identifiés. Il est constaté une participation active des membres de l'équipe, l'auto-organisation et l’assistance mutuelle, non seulement avec un but de performance, mais aussi en vue d'exploiter les possibilités d'apprentissage par l'expérience. Ce comportement était encouragé par les personnes en charge du processus de formation. Au cours de la période de travail, nous avons trouvé sept différents types de comportement et d'interaction verbale visant à apprendre en situation de travail. Certaines stratégies ont été plus utilisées dans les périodes calmes de la journée de travail, tandis que d'autres étaient plus utilisées pendant la gestion des feux de forêt. À la fin de la saison, toutes les stratégies ont tendance à être moins fréquentes.Il est possible d'identifier une stratégie organisationnelle visant à la création d'environnements favorables à l’apprentissage informelle à travers la collaboration en ce qui concerne la proposition d’idées, de support mutuelle, des initiatives d’auto-apprentissage, d'interaction et d’analyse réflexif en partageant les expériences de travail. Ces conditions permettent la création d’une communauté de pratique dans l’action, participent à la construction d’un collectif et au développement d’une compétence collective, l’épistèmo-vigilance orienté à exploiter à la fois la dimension constructive et productive de l’activité. Cette communauté renforce l’autonomie du collectif à travers la production continue des nouvelles modalités d’apprentissage et par la remise en cause de leurs pratiques. L'analyse réflexive qui domine les stratégies mises en place lors des moments calmes de la journée et pendant la gestion des incendies de forêt sont partie de l’apprentissage constructif mené par l’encadrement, où l'apprentissage est essentiel pour atteindre les performances attendues comme une équipe. Ces conditions sont considérées comme des accélérateurs organisationnels de la formation, de l’apprentissage et de la reprise des savoirs qui contribuent au pouvoir d’agir du collectif. Ces accélérateurs permettent de faire face des environnements dynamiques à risque, participent à la création des collectifs de travail et à l’existence d’un environnement capacitant. Ces pratiques d’ergonomie constructive atténuée les contraintes et les risques du personnel non-permanent ayant compté sur chaque année, lorsque la saison des incendies de forêt se produit..Mots clés: apprentissage informel, analyse réflexive des pratiques, apprentissage en situation de travail, collectifs, pouvoir d’agir, environnement dynamiques à risque, feux de forêt, accélérateurs, épistèmo-vigilance

Organisation du travail et souffrance psychique dans les activités de service : le cas des centres d'appel en Argentine

This research is the result of a thorough analysis of the work of two call centers in Argentina. This fieldwork, building on call center visits undertaken in other countries, is the starting point for the study of two main issues. Firstly, the study of the consequences of call center work for mental health. Secondly, the study of different approaches that support the development of ways to improve it such work. Work psychodynamics and activity ergonomics are two disciplines that propose different points of view on these issues. Nowadays, they both find themselves confronted by quantitative scales that seek to measure psychosocial risks. The aim of this thesis is to increase knowledge on the relationship between work organization and tasks content and highlight the consequences for workers in Argentina. The thesis shall also compare results of the study with those found in other countries.Cette recherche est le résultat de deux travaux d’analyse de l’activité dans deux centres d’appels téléphoniques en Argentine. Un travail de terrain, ainsi qu'une appréciation de plusieurs autres centres d’appels téléphoniques dans différents pays, auront servi de point de départ pour étudier deux grands axes: d’une part, l’étude des conséquences du travail dans les call centers sur la santé mentale et d’autre part, l'analyse des différentes approches de cette problématique en vue de sa transformation. La psychodynamique du travail et l’ergonomie de l’activité proposent différents regards, aujourd’hui confrontés aux questionnaires d’évaluation des risques psychosociaux. Cette thèse vise à mieux appréhender le lien entre l’organisation du travail, le contenu des tâches et les conséquences pour les travailleurs argentins, et compare ces résultats avec ceux d' autres pays où des investigations similaires ont été menées

Le cerveau «immature» : genèse et diffusion d’un nouveau discours social sur les jeunes délinquants aux États-Unis

Cette thèse prend pour objet la place des savoirs neuroscientifiques sur le cerveau adolescent dans les mutations contemporaines du champ de la justice des mineurs aux États-Unis. Plus spécifiquement, elle analyse les logiques sociohistoriques ayant conduit la théorie de l’immaturité cérébrale des adolescents à jouer un rôle clé dans trois arrêts de la Cour Suprême qui, entre 2005 et 2012, ont rendu la peine de mort et la prison à vie inconstitutionnelles pour les délinquants mineurs. Située au croisement de la sociologie des sciences et de la sociologie du champ pénal, cette recherche propose de saisir ce « triptyque juridique » à la lumière de l’histoire longue du traitement pénal des mineurs aux États-Unis. Elle analyse les débats contemporains entourant l’âge de la majorité pénale à l’aune des luttes symboliques qui se sont historiquement nouées autour de la définition du « problème » de la délinquance juvénile. Suivant un regard sociohistorique, cette thèse retrace les oppositions et les alliances entre scientifiques, fondations philanthropiques, sociétés savantes, agences gouvernementales, élus politiques et acteurs juridiques qui ont façonné la trajectoire du champ de la justice des mineurs états-unienne. Cette recherche s’intéresse particulièrement au « travail de manipulation symbolique » (Bourdieu, 2001) des « nouveaux réformateurs », une alliance hétérogène d’agents appartenant à la classe dominante, qui au tournant du 21e siècle ont construit et diffusé un nouveau discours social situant les causes de la délinquance juvénile dans le cerveau des adolescents. Elle formule une critique des fondements épistémologiques et des usages politiques de ce discours, et rend compte des rapports de pouvoir, notamment d’âge, de classe et de race, qu’il participe à renforcer, malgré les ambitions progressistes de ses promoteurs. Les analyses présentées dans cette recherche s’appuient sur un matériau hétéroclite combinant des archives judiciaires, des articles scientifiques, de la littérature grise et 37 entretiens semi-directifs réalisés auprès de chercheurs, de juges, de membres de fondations philanthropiques, d’associations militantes et d’agences gouvernementales. L’hétérogénéité de ce matériau offre un moyen de suivre les déplacements du discours de l’immaturité du laboratoire vers le tribunal ou du Congrès des États-Unis vers les institutions correctionnelles. Elle permet de rendre raison des logiques spécifiques de champ qui génèrent l’action de ces agents, ainsi que des logiques transversales qui les conduisent à s’allier pour agir politiquement afin de « sauver » les jeunes délinquants.This dissertation investigates the role of neuroscientific knowledge about the adolescent brain in the contemporary mutations of the field of juvenile justice in the United States. More specifically, it analyzes the socio-historical dynamics whereby the theory of adolescent brain immaturity came to play a key role in three Supreme Court rulings which, between 2005 and 2012, made the death penalty and life imprisonment unconstitutional for juvenile offenders. Located at the intersection of the sociology of science and the sociology of the penal field, this dissertation examines this “legal triptych” in light of the history of the juvenile justice system in the United States. I argue that the contemporary debates surrounding the age of criminal responsibility are the latest manifestation of the symbolic struggles that various fractions of the dominant class have historically waged around the definition of the “problem” of juvenile delinquency. Following a socio-historical perspective, this dissertation traces the oppositions and alliances between scientists, philanthropic foundations, learned societies, government agencies, elected politicians, and legal actors who have shaped the trajectory of the field of juvenile justice in the U. S. One key focus of the dissertation is to examine the “work of symbolic manipulation” (Bourdieu, 2001) of the “new reformers”, an heterogenous alliance of agents from the dominant class who, at the turn of the 21st century, constructed and disseminated a new social discourse locating the causes of juvenile delinquency in the brain of adolescents. To address this focus, I formulate a critique of the epistemological foundations and political uses of this discourse. I give an account of the power relations, notably of age, class and race, that this discourse of immaturity helps to reinforce, despite the progressive ambitions of its promoters. The analyses presented in this dissertation are based on a diversified material combining judicial archives, scientific articles, grey literature and 37 semi-structured interviews conducted with scholars, judges, members of philanthropic foundations, of activist groups and of government agencies. The heterogeneity of this material provides the means to track how the discourse of immaturity shifts from the laboratory to the courtroom or from the U.S. Congress to correctional institutions. It allows me to account for the specific field logics that generate the action of these agents, as well as the cross-cutting logics that lead them to ally themselves to act politically in order to “save” juvenile offenders

Sanctionner les "châtiments corporels" à visée éducative?: Aspects sociaux et juridiques d'un intolérable en devenir

Les « châtiments corporels » à visée éducative (la fessée, la gifle, le fouet, etc.) ont durant de nombreux siècles constitué des gestes relevant de la banalité quotidienne. Ils étaient non seulement jugés normaux, mais également indispensables dans une société traditionnelle où la correction domestique était considérée comme un devoir, un service que les parents étaient tenus de rendre à leurs enfants pour les amender. Il en est tout autrement aujourd’hui. Si certaines formes atténuées de réprimandes manuelles sont encore tolérées sur le territoire français, de plus en plus de voix se font entendre pour réclamer leur prohibition effective. Cet interdit en devenir suggère un déplacement dans l’« économie morale » de l’enfance, initiant, après le thème des abus sexuels et celui de la maltraitance, un nouvel « intolérable » autour du corps de l’enfant. En effet, loin de signifier une dilution des normes instituant la famille sous l’effet de la promotion de l’individu caractérisant les sociétés occidentales, la valeur incommensurable dont a été investie la condition enfantine s’est accompagnée de prescriptions et proscriptions pléthoriques dans la caractérisation de la « fonction » parentale.L’intention qui a animé la conduite de cette recherche était précisément de contribuer à l’analyse de la normalisation éducative s’exerçant dans le contexte de ces transformations contemporaines, à partir de la remise en cause de la légitimité et de la licéité des punitions corporelles « ordinaires ». Or, l’émergence récente de cet intolérable, le fait qu’il ne se soit pas encore imposé comme évidence, autorise le déploiement d’une focale d’analyse étendue susceptible de rendre particulièrement lisibles les divers processus participant de sa reconnaissance. Ainsi, à partir du constat selon lequel un nombre important de faits s’apparentant à des châtiments corporels éducatifs ne parviennent jamais à l’attention des services sociaux et de la justice, une première partie du rapport est consacrée à explorer les circonstances dans lesquelles certaines situations sont portées à la connaissance de ces institutions et les dynamiques de mise en visibilité dont elles procèdent. La deuxième partie est proprement dédiée aux réponses apportées à ces comportements à l’occasion de leur traitement administratif et judiciaire, et à l’examen des critères de jugement discutés ou partagés à partir desquels s’élaborent les décisions à ce propos. La troisième partie revient sur le processus législatif engagé contre les « violences éducatives ordinaires » et expose la réception qui en est faite par les acteurs de la protection de l’enfance et les magistrats, avant d’expliciter le contenu de l’expertise médicale mobilisée à des fins militantes et ses formes de transmission aux professionnels concernés. Enfin, une dernière partie consacrée aux pratiques éducatives des familles interroge les rapports différenciés à la norme de proscription des châtiments corporels et les formes de travail sur soi qu’ils engagent

Etudier le travail des cadres : un bilan de 10 ans d'expérience de recherches

http://gdr-cadres.cnrs.fr/cahier/Cahier6.pdfSans résumé

La prise en compte de la notion de qualité dans la mesure de la performance judiciaire.: La qualité : une notion relationnelle

Le ministère de la justice présente un projet et un rapport annuel de performance (PAM et RAM) qui comporte trois types d'objectifs : l'efficience de la gestion pour le contribuable, l'efficacité socio-économique pour le citoyen et la qualité du service pour le justiciable. Si la qualité se définit comme l'adéquation entre le besoin et la prestation, elle doit donc être conçue comme l'optimisation de l'aptitude du système à satisfaire les besoins exprimés ou implicites de son destinataire. L'évolution rapide des fonctions judiciaires et de l'environnement dans lequel elles s'exercent ont pour effet de rendre moins pertinente une approche s'appuyant exclusivement sur une analyse statistique. Les indicateurs choisis, de délai moyen de traitement et de ratio d'affaires traitées par magistrat et par fonctionnaire, relèvent surtout de l'estimation de la qualité du processus judiciaire. Seuls les taux de cassation et de rejet par le casier judiciaire national rendent compte de ce qui pourrait être analysé comme une non-qualité de la production judiciaire. Au sein du ministère, la direction des services judiciaires affirme son ambition d'améliorer la qualité du service rendu au justiciable, notamment par la réduction des délais, en assurant la promotion du programme LEAN (amélioration de la qualité de service en maximisant le temps à valeur ajoutée). Cependant, dans les juridictions, l'Inspection générale recueille, lors de ses contrôles de fonctionnement des juridictions, les interrogations des praticiens de la justice sur la qualité du service rendu, sa dégradation ou sa non valorisation. Par ailleurs, émerge l'exigence d'un management public de qualité (MPQ) appliqué à la direction des cours et tribunaux. Les normes internationales ISO, le cadre européen d'autoévaluation des politiques publiques (CAF) engagent à la modernisation de la gouvernance par la qualité. La question est alors de savoir comment s’est définie la stratégie du ministère de la justice en vue de cet objectif de qualité, en insistant, entre autres, sur les points suivants :- quelle définition de la qualité de la justice, quels indicateurs pour l'évaluer ?- quelle prise en compte de cette notion dans la mesure de la performance de l'institutionjudiciaire

" Approche sociologique de la conduite instrumentée. Formes de la cognition distribuée en conduite automobile ".

Innovation in the automotive sector is increasingly integrating driving aids in the vehicle in fields like security and comfort. These systems are designed to process and represent information that can provide better performance in the tasks of drivers. Based on the assumption of situated action, we argue that acting in driving mobilizes distributed processes of cognition that differ depending on the role played by external aids in the course of action. Saying that the action is located leads us to say that the driver accesses to circumstances through its percepts and acts taking into account what he perceives. Act in situation involves an adjustment between the socially constructed knowledge through experience of the social world and external aids available in situations. Knowing that the addition of a new task changes the main task, we study uses of GPS system, speed limiter and cruise control for their influence on decision-making process in driving. Our approach in cognitive ethnography set out to consider activity in its ecology and relies on the ability of actors to give meaning to the social world and to give a description.L'innovation dans le secteur automobile consiste de plus en plus en l'intégration d'aides à la conduite dans le véhicule dans des domaines comme la sécurité et le confort. Ce sont des systèmes conçus pour traiter et représenter de l'information qui sont en mesure d'apporter une meilleure performance dans les tâches des conducteurs. Sur la base de l'hypothèse de l'action située, nous soutenons qu'agir en conduite automobile mobilise des processus de distribution de la cognition qui diffèrent selon le rôle joué par les aides externes dans le cours d'action. Dire que l'action est située nous amène à dire que le conducteur accède aux circonstances au moyen de ses percepts et agit en tenant compte de ce qu'il perçoit. Agir en situation mobilise un ajustement entre les savoirs socialement construits par l'expérience du monde social et les aides externes accessibles dans les situations. Sachant que l'ajout d'une nouvelle tâche modifie la tâche principale, nous étudions les usages du système GPS, du limiteur de vitesse et du régulateur de vitesse pour connaître leur influence sur les processus de prise de décision en conduite automobile. Notre approche en ethnographie cognitive propose de saisir l'activité dans son écologie et s'appuie sur la capacité des acteurs de donner du sens au monde social et d'en donner une description