My Story. Digital Storytelling across Europe for Social Cohesion

‘My Story’ (Mysty) is a pan-European, Erasmus+ funded Digital Storytelling project focused on intercultural competency. It has eight partners (HE, secondary schools and NGOs) across four countries (Austria, Italy, Hungary and the UK) and involves the collection, editing and uploading of digital stories to a shared ‘toolbox’. These stories focus on ‘food’, ‘family’ and ‘festival’ and act as a platform for diversity awareness and digital upskilling. The project is driven by the principle that innovative teaching resources form part of broader pedagogic strategies that can actively help tackle issues of diversity common across the EU. The paper discusses the process the project went through, some of its challenges and its results and, on the basis of these, looks at the role digital storytelling as a way of expressing different ethical, cultural or personal issues

Object narratives, imaginings and multilingual communities: young people’s digital stories in the making

This paper draws on research from a global 5-year project, Critical Connections: Multilingual Digital Storytelling (2012-2017), which links language and intercultural learning with literacy, active citizenship and the arts. A critical ethnographic approach was adopted in the research project and the multilingual digital stories were an integral part of the research process. With the project’s focus on multilingualism and creation of bilingual digital texts, young people had to imagine how to use language in new contexts, uncover narratives around objects, and negotiate interfaces between different cultural landscapes. The research findings revealed the complexity of multilingual digital storytelling and how young people (aged 6-18 years old) learnt to become meaning makers discovering their own voices in unfamiliar contexts. Through these digital stories the young people forged strong links with the past and created new multilingual communities

Reconnaissance des expressions faciales pour l’assistance ambiante

Au cours de ces dernières décennies, le monde a connu d’importants changements démographiques et notamment au niveau de la population âgée qui a fortement augmenté. La prise d’âge a comme conséquence directe non seulement une perte progressive des facultés cognitives, mais aussi un risque plus élevé d’être atteint de maladies neurodégénératives telles qu’Alzheimer et Parkinson. La perte des facultés cognitives cause une diminution de l’autonomie et par conséquent, une assistance quotidienne doit être fournie à ces individus afin d’assurer leur bien-être. Les établissements ainsi que le personnel spécialisé censés les prendre en charge représentent un lourd fardeau pour l’économie. Pour cette raison, d’autres solutions moins coûteuses et plus optimisées doivent être proposées. Avec l’avènement des nouvelles technologies de l’information et de la communication, il est devenu de plus en plus aisé de développer des solutions permettant de fournir une assistance adéquate aux personnes souffrant de déficiences cognitives. Les maisons intelligentes représentent l’une des solutions les plus répandues. Elles exploitent différents types de capteurs pour la collecte de données, des algorithmes et méthodes d’apprentissage automatique pour l’extraction/traitement de l’information et des actionneurs pour le déclenchement d’une réponse fournissant une assistance adéquate. Parmi les différentes sources de données qui sont exploitées, les images/vidéos restent les plus riches en termes de quantité. Les données récoltées permettent non seulement la reconnaissance d’activités, mais aussi la détection d’erreur durant l’exécution de tâches/activités de la vie quotidienne. La reconnaissance automatique des émotions trouve de nombreuses applications dans notre vie quotidienne telles que l’interaction homme-machine, l’éducation, la sécurité, le divertissement, la vision robotique et l’assistance ambiante. Cependant, les émotions restent un sujet assez complexe à cerner et de nombreuses études en psychologie et sciences cognitives continuent d’être effectuées. Les résultats obtenus servent de base afin de développer des approches plus efficaces. Les émotions humaines peuvent être perçues à travers différentes modalités telle que la voix, la posture, la gestuelle et les expressions faciales. En se basant sur les travaux de Mehrabian, les expressions faciales représentent la modalité la plus pertinente pour la reconnaissance automatique des émotions. Ainsi, l’un des objectifs de ce travail de recherche consistera à proposer des méthodes permettant l’identification des six émotions de base à savoir : la joie, la peur, la colère, la surprise, le dégoût et la tristesse. Les méthodes proposées exploitent des données d’entrée statiques et dynamiques, elles se basent aussi sur différents types de descripteurs/représentations (géométrique, apparence et hybride). Après avoir évalué les performances des méthodes proposées avec des bases de données benchmark à savoir : JAFFE, KDEF, RaFD, CK+, MMI et MUG. L’objectif principal de ce travail de recherche réside dans l’utilisation des expressions faciales afin d’améliorer les performances des systèmes d’assistance existants. Ainsi, des expérimentations ont été conduites au sein de l’environnement intelligent LIARA afin de collecter des données de validation, et ce, en suivant un protocole d’expérimentation spécifique. Lors de l’exécution d’une tâche de la vie quotidienne (préparation du café), deux types de données ont été récoltés. Les données RFID ont permis de valider la méthode de reconnaissance automatique des actions utilisateurs ainsi que la détection automatique d’erreurs. Quant aux données faciales, elles ont permis d’évaluer la contribution des expressions faciales afin d’améliorer les performances du système d’assistance en termes de détection d’erreurs. Avec une réduction du taux de fausses détections dépassant les 20%, l’objectif fixé a été atteint avec succè

Emotion and Stress Recognition Related Sensors and Machine Learning Technologies

This book includes impactful chapters which present scientific concepts, frameworks, architectures and ideas on sensing technologies and machine learning techniques. These are relevant in tackling the following challenges: (i) the field readiness and use of intrusive sensor systems and devices for capturing biosignals, including EEG sensor systems, ECG sensor systems and electrodermal activity sensor systems; (ii) the quality assessment and management of sensor data; (iii) data preprocessing, noise filtering and calibration concepts for biosignals; (iv) the field readiness and use of nonintrusive sensor technologies, including visual sensors, acoustic sensors, vibration sensors and piezoelectric sensors; (v) emotion recognition using mobile phones and smartwatches; (vi) body area sensor networks for emotion and stress studies; (vii) the use of experimental datasets in emotion recognition, including dataset generation principles and concepts, quality insurance and emotion elicitation material and concepts; (viii) machine learning techniques for robust emotion recognition, including graphical models, neural network methods, deep learning methods, statistical learning and multivariate empirical mode decomposition; (ix) subject-independent emotion and stress recognition concepts and systems, including facial expression-based systems, speech-based systems, EEG-based systems, ECG-based systems, electrodermal activity-based systems, multimodal recognition systems and sensor fusion concepts and (x) emotion and stress estimation and forecasting from a nonlinear dynamical system perspective

My Story. Digital Storytelling across Europe for Social Cohesion

‘My Story’ (Mysty) is a pan-European, Erasmus+ funded Digital Storytelling project focused on intercultural competency. It has eight partners (HE, secondary schools and NGOs) across four countries (Austria, Italy, Hungary and the UK) and involves the collection, editing and uploading of digital stories to a shared ‘toolbox’. These stories focus on ‘food’, ‘family’ and ‘festival’ and act as a platform for diversity awareness and digital upskilling. The project is driven by the principle that innovative teaching resources form part of broader pedagogic strategies that can actively help tackle issues of diversity common across the EU. The paper discusses the process the project went through, some of its challenges and its results and, on the basis of these, looks at the role digital storytelling as a way of expressing different ethical, cultural or personal issues