Exploring Emotion Recognition for VR-EBT Using Deep Learning on a Multimodal Physiological Framework

Post-Traumatic Stress Disorder is a mental health condition that affects a growing number of people. A variety of PTSD treatment methods exist, however current research indicates that virtual reality exposure-based treatment has become more prominent in its use.Yet the treatment method can be costly and time consuming for clinicians and ultimately for the healthcare system. PTSD can be delivered in a more sustainable way using virtual reality. This is accomplished by using machine learning to autonomously adapt virtual reality scene changes. The use of machine learning will also support a more efficient way of inserting positive stimuli in virtual reality scenes. Machine learning has been used in medical areas such as rare diseases, oncology, medical data classification and psychiatry. This research used a public dataset that contained physiological recordings and emotional responses. The dataset was used to train a deep neural network, and a convolutional neural network to predict an individual’s valence, arousal and dominance. The results presented indicate that the deep neural network had the highest overall mean bounded regression accuracy and the lowest computational time

A vision-based approach for human hand tracking and gesture recognition.

Hand gesture interface has been becoming an active topic of human-computer interaction (HCI). The utilization of hand gestures in human-computer interface enables human operators to interact with computer environments in a natural and intuitive manner. In particular, bare hand interpretation technique frees users from cumbersome, but typically required devices in communication with computers, thus offering the ease and naturalness in HCI. Meanwhile, virtual assembly (VA) applies virtual reality (VR) techniques in mechanical assembly. It constructs computer tools to help product engineers planning, evaluating, optimizing, and verifying the assembly of mechanical systems without the need of physical objects. However, traditional devices such as keyboards and mice are no longer adequate due to their inefficiency in handling three-dimensional (3D) tasks. Special VR devices, such as data gloves, have been mandatory in VA. This thesis proposes a novel gesture-based interface for the application of VA. It develops a hybrid approach to incorporate an appearance-based hand localization technique with a skin tone filter in support of gesture recognition and hand tracking in the 3D space. With this interface, bare hands become a convenient substitution of special VR devices. Experiment results demonstrate the flexibility and robustness introduced by the proposed method to HCI.Dept. of Computer Science. Paper copy at Leddy Library: Theses & Major Papers - Basement, West Bldg. / Call Number: Thesis2004 .L8. Source: Masters Abstracts International, Volume: 43-03, page: 0883. Adviser: Xiaobu Yuan. Thesis (M.Sc.)--University of Windsor (Canada), 2004

Protótipo de ambiente virtual educacional para atividade típica da construção civil brasileira

Resumo: Atualmente, a indústria brasileira de construção está passando ao processo econômico que resulta em um polo atrativo para os jovens. Eles estão se esforçando para aprender profissões como Arquitetura, Engenharia E Construção. Eles pertencem a uma geração onde o computador está presente em suas vidas para acessar informações e conhecimento. Esta geração não é mais um receptor passivo de conteúdos transmitidos, mas um produtor do seu conhecimento através de mídias interativas nos dias de hoje. Mas, a educação no Brasil nas áreas da Arquitetura, Engenharia e Construção ainda estão baseadas em um paradigma onde o conhecimento está centrado na figura do educador. O educador brasileiro não explora os recursos que são familiares a esta nova geração. Isso ressalta a necessidade de mudar este paradigma, utilizando recursos da aprendizagem medida por tecnologias da informação e comunicação. Pesquisando contextos de aprendizagem em Arquitetura, Engenharia e Construção pode-se notar que a Realidade Virtual se apresenta como uma poderosa ferramenta educacional. O objetivo da dissertação de mestrado é o desenvolvimento de uma ferramenta para analisar e complementar o processo de ensino e aprendizagem. É apresentado um protótipo de ambiente virtual educacional para simular atividades típicas da construção civil brasileira que foi testado por alunos e docente do curso de graduação em Engenharia Civil da Universidade Federal do Paraná, demonstrando sua usabilidade e eficácia como ferramenta de treinamento e aprendizagem. Conclui-se que através da experiência com o ambiente virtual protótipo um aprendiz possa entender a tarefa simulada de maneira mais intuitiva e menos opressora do que as metodologias usuais em sala de aula, ao mesmo tempo em que visa incentivar os educadores a buscar pedagogias mais inovadoras e motivadoras