Automatic analysis of facilitated taste-liking

This paper focuses on: (i) Automatic recognition of taste-liking from facial videos by comparatively training and evaluating models with engineered features and state-of-the-art deep learning architectures, and (ii) analysing the classification results along the aspects of facilitator type, and the gender, ethnicity, and personality of the participants. To this aim, a new beverage tasting dataset acquired under different conditions (human vs. robot facilitator and priming vs. non-priming facilitation) is utilised. The experimental results show that: (i) The deep spatiotemporal architectures provide better classification results than the engineered feature models; (ii) the classification results for all three classes of liking, neutral and disliking reach F1 scores in the range of 71%-91%; (iii) the personality-aware network that fuses participants’ personality information with that of facial reaction features provides improved classification performance; and (iv) classification results vary across participant gender, but not across facilitator type and participant ethnicity.EPSR

Mimische Reaktionen auf Geschmacks- und Geruchsreize bei gesunden Erwachsenen, Patientinnen mit Essstörungen und Patientinnen mit Aufmerksamkeitsdefizit/Hyperaktivitätsstörung

The aim of this project was to investigate whether reflex-like innate facial reactions to tastes and odors are altered in patients with eating disorders. Qualitatively different tastes and odors have been found to elicit specific facial expressions in newborns. This specificity in newborns is characterized by positive facial reactions in response to pleasant stimuli and by negative facial reactions in response to unpleasant stimuli. It is, however, unclear, whether these specific facial displays remain stable during ontogeny (1). Despite the fact that several studies had shown that taste-and odor-elicited facial reactions remain quite stable across a human’s life-span, the specificity of research questions, as well as different research methods, allow only limited comparisons between studies. Moreover, the gustofacial response patterns might be altered in pathological eating behavior (2). To date, however, the question of whether dysfunctional eating behavior might alter facial activity in response to tastes and odors has not been addressed. Furthermore, changes in facial activity might be linked to deficient inhibitory facial control (3). To investigate these three research questions, facial reactions in response to tastes and odors were assessed. Facial reactions were analyzed using the Facial Action Coding System (FACS, Ekman & Friesen, 1978; Ekman, Friesen, & Hager, 2002) and electromyography.Ziel dieses Projektes war es zu untersuchen, ob spezifische, mimische Reaktionen auf Geschmacks- und Geruchsreize bei Patientinnen mit Essstörungen verändert sind. Bei Neugeborenen rufen qualitativ verschiedene Geschmacksreize und Geruchsreize spezifische mimische Reaktionsmuster hervor. Diese Spezifität zeichnet sich infolge angenehmer Reize durch positive mimische Reaktionen und infolge unangenemher Reize durch negative mimische Reaktionen aus. Es ist jedoch unklar, ob diese spezifischen Reaktionsmuster während der ontogentischen Entwicklung stabil bleibe (1). Trotz der Befunde, dass geschmacks- und geruchsinduzierte mimische Reaktionen bei Erwachsenen relativ stabil bleiben, erlauben spezifische Forschungsfragen und verschiedene Methoden nur einen begrenzten Vergleich zwischen den Studien. Darüber hinaus könnten die gustofazialen Reaktionsmuster bei Patientinnen mit Essstörungen verändert sein (2). Diese Frage wurde jedoch bisher nicht untersucht. Weiterhin könnten Veränderungen in den mimischen Reaktionen bei essgestörten Patientinnen durch eine defizitäre Hemmungskontrolle bedingt sein (3). Zur Klärung dieser drei Fragestellungen wurden mimische Reaktionen auf Geschmacks- und Geruchsreize erfasst. Die Mimikanalyse erfolgte mit Hilfe des Facial Action Coding Systems (FACS, Ekman & Friesen, 1978; Ekman, Friesen, & Hager, 2002) und des Elektromyogramms