Reconocimiento de emociones en la voz empleando redes neuronales y su integración en frameworks multimodales de educción emocional

El habla es una de las formas naturales para que los humanos expresen sus emociones. Es fácil de obtener y procesar en escenarios en tiempo real, pero, sin embargo, el reconocimiento automático del habla emocional implica muchos problemas que necesitan ser estudiados cuidadosamente, tales como: qué emociones podemos identificar realmente, definir concretamente qué se entiende por cada emoción descripta, cuáles son las mejores características para la identificación y qué clasificadores dan el mejor rendimiento. En este trabajo se describe el diseño y desarrollo de redes neuronales para la clasificación de emociones en el discurso hablado (voz), se proponen diferentes métodos para convertir un enfoque categórico de clasificación de emociones a uno dimensional y la integración del clasificador con frameworks multimodales de captura de emociones.Eje: Innovación en sistemas de software.Red de Universidades con Carreras en Informátic

Speech emotion representation : A method to convert discrete to dimensional emotional models for emotional inference multimodal frameworks

Computer-Human interaction is more frequent now than ever before, thus the main goal of this research area is to improve communication with computers, so it becomes as natural as possible. A key aspect to achieve such interaction is the affective component often missing from last decade developments. To improve computer human interaction in this paper we present a method to convert discrete or categorical data from a CNN emotion classifier trained with Mel scale spectrograms to a two-dimensional model, pursuing integration of the human voice as a feature for emotional inference multimodal frameworks. Lastly, we discuss preliminary results obtained from presenting audiovisual stimuli to different subject and comparing dimensional arousal-valence results and it’s SAM surveys.Facultad de Informátic

Interacción humano-robot en el contexto de la computación afectiva asociando estados emocionales al comportamiento de un robot

Se presentan los resultados preliminares del desarrollo de un framework de interacción emocional Humano-Robot que contribuye con la configuración de estados emocionales, del tipo de robot (físicos o virtual) y sus acciones asociadas en respuesta al estado emocional. Para este proyecto, se trabajó en la integración de distintos sistemas entre ellos se destaca el software Emotion Detection Asset, que se encargará de reconocer emociones a través de expresiones faciales, capturadas por medio de una webcam o de una imagen importada desde un archivo; interfase de usuario por cuál se puede realizar diferentes configuraciones; robots físicos (Roboreptile) y/o virtuales, para la representación o ejecución de acciones en respuesta a las emociones capturadas del humano, finalmente se realizan pruebas con software de reconocimiento de emociones propietario. En la primera sección “introducción” se presentan las características generales del área de computación afectiva, enfoque categórico de emociones, modelos multimodales y unimodales, emociones, finalmente se presenta una síntesis comparativa de los trabajos específicos de emociones y robots. En la segunda sección se presenta sintéticamente el problema, en la tercera sección se plantea la solución desarrollada, en la cuarta sección se presentan las pruebas preliminares, finalmente en la quinta sección se enuncian las conclusiones y futuras líneas de trabajo.XV Workshop Innovación en sistemas de Software (WISS)Red de Universidades con Carreras en Informátic

Captura multimodal para la inferencia de estados emocionales aplicados a contextos de computación afectiva

En este trabajo se enuncian el contexto de desarrollo en materia de I+D aplicada a la captura multimodal de emociones en diversos ámbitos de aplicación (virtuales, simuladores, robots, gastronomía), los proyectos vinculantes y los resultados publicados, como así también las líneas de I+D+I, la formación de RRHH. Finalmente, se expresa el reconocimiento al Ing. Hugo Rene Padovani, quien apoyara la formación de docentes investigadores del área informática en la UM.Eje: Innovación en sistemas de software.Red de Universidades con Carreras en Informátic

Computación afectiva aplicada a la valoración emocional en contextos gastronómicos

Este proyecto de investigación aplicada se orienta a la captura de estados emocionales de personas interactuando en contextos gastronómicos, a través de un Framework Multimodal, con la capacidad de registrar datos tanto fisiológicos como biométricos, contribuye a reflejar el estado emocional con una mayor fidelidad que la obtenida cuando se utilizan pocos medios de recolección de datos o encuestas. Se pretende obtener información en un contexto multimodal, a fin de valorar el grado de placer-rechazo, e intensidad que se producen en una persona frente a diferentes comidas o alimentos.Eje: Innovación en sistemas de software.Red de Universidades con Carreras en Informátic