Avatar 3D para síntese automática de sinais da língua de sinais brasileira

Resumo: A Libras, Língua de Sinais Brasileira, utilizada por pessoas com deficiência auditiva, tem impulsionado estudos nos mais diversos campos. Na área de tecnologia de informação não e diferente. Para pessoas com esta deficiência, sistemas com representação virtual podem ter seu uso em vários aspectos do cotidiano, servindo de ferramenta para acesso a informações. Os softwares que utilizam um ambiente virtual voltado para línguas de sinais existentes, contudo, são baseados em sinais indivisíveis e não em parâmetros de um modelo computacional, ou mesmo soletração. Assim, os sistemas ficam limitados a uma lista de palavras, ou sinais, prontos. Alem disso, muitos destes softwares são comerciais, e possuem suas bases limitadas, não oferecendo a possibilidade e incremento de elementos na base de conhecimento. Este trabalho apresenta uma nova abordagem na construção de um sistema que utiliza um Avatar 3D para representação da Libras, utilizando entrada baseada em um modelo formal e gerando sinais automaticamente através de um motor gráfico, baseado em parâmetros gerais como as posições e articulações utilizadas e não em sinais completos, possuindo ainda a vantagem de permitir a inclusão de novos sinais e parâmetros. São apresentados conceitos e métodos para criação de um Avatar 3D, o estudo de modelos computacionais para Línguas de Sinais e por fim foi desenvolvido um sistema de síntese que obtêm, a partir de uma entrada externa de dados, um vetor de parâmetros de configuração referentes a elementos de sinais da Libras que são representados pelo Avatar 3D automaticamente. Com isto, este trabalho contribui para o desenvolvimento de um sistema para síntese de sinais em um ambiente virtual sem as limitações apresentadas nos sistemas atuais, contribuindo assim para o desenvolvimento de novas tecnologias para a comunidade surda abordando os conceitos corretos. Os experimentos descritos no trabalho validam o modelo proposto, o qual se apresenta como alternativa promissora na área de síntese de sinais para uso computacional de linguagens como a Libras

Emotional engineering of artificial representations of sign languages

The fascination and challenge of making an appropriate digital representation of sign language for a highly specialised and culturally rich community such as the Deaf, has brought about the development and production of several digital representations of sign language (DRSL). These range from pictorial depictions of sign language, filmed video recordings to animated avatars (virtual humans). However, issues relating to translating and representing sign language in the digital-domain and the effectiveness of various approaches, has divided the opinion of the target audience. As a result there is still no universally accepted digital representation of sign language. For systems to reach their full potential, researchers have postulated that further investigation is needed into the interaction and representational issues associated with the mapping of sign language into the digital domain. This dissertation contributes a novel approach that investigates the comparative effectiveness of digital representations of sign language within different information delivery contexts. The empirical studies presented have supported the characterisation of the prescribed properties of DRSL's that make it an effective communication system, which when defined by the Deaf community, was often referred to as "emotion". This has led to and supported the developed of the proposed design methodology for the "Emotional Engineering of Artificial Sign Languages", which forms the main contribution of this thesis