Acesso multimodal a vídeos georreferenciados através da forma, velocidade e tempo em dispositivos móveis

Abstract

Tese de mestrado, Informática, Universidade de Lisboa, Faculdade de Ciências, 2014Um volume crescente de vídeo digital é acedido, capturado e publicado diariamente na Web, a partir de diferentes plataformas e dispositivos, que cada vez mais podem georreferenciar a informação que capturam e acedem, permitindo enriquecer a sua contextualização. No entanto, a procura de vídeo tem sido limitada a palavras-chave ou a conjuntos de parâmetros, dando um suporte limitado às dimensões espacial e temporal. Os dispositivos móveis são atualmente usados de forma generalizada e estão cada vez mais a incorporar um amplo conjunto de sensores e actuadores com o potencial de capturar e apresentar vídeo em 360º e os seus metadados, tendo a capacidade de suportar experiências de utilizador mais poderosas e imersivas com vídeo. Propomos formas inovadoras de procurar, navegar e visualizar vídeo, tirando partido do potencial dos sensores e interfaces móveis nas dimensões espacial e temporal. Este trabalho foi desenvolvido no contexto do projeto de investigação ImTV, e explora modalidades inovadoras para procurar e aceder a vídeos georeferenciados, onde as dimensões espacio-temporais são de importância central, especialmente através da forma e velocidade das trajectórias dos vídeos, e do tempo, usando interfaces multimodais interativas em dispositivos móveis, envolvendo gestos e movimento, com o potencial de criar interacções mais naturais, um maior envolvimento, sensação de presença e imersão. A avaliação baseou-se em protótipos de baixa e alta fidelidade e teve resultados positivos. Os utilizadores consideraram a maioria das funcionalidades úteis, satisfatórias, por vezes divertidas, e fáceis de usar. As diferentes opções e modalidades foram consideradas interessantes e adequadas para diferentes cenários de uso que foram identificados e sugeridos. Alguns receios e desafios foram identificados e poderão ser levados em conta em futuros desenvolvimentos, em direcção a formas interativas de acesso a conteúdo mais flexíveis e eficazes, através de interacções mais naturais com dispositivos móveis, por si só ou como segundos ecrãs relativamente a ecrãs maiores numa TV ou em grandes superfícies em espaços públicos.An increasing amount of digital video is accessed, captured, and uploaded to the Web everyday, from different platforms and devices, that increasingly can georeferenced the information they capture and access, allowing to enrich their contextualization. But video search has been limited to keywords, or a set of parameters, providing limited support for temporal and spatial dimensions. Mobile devices are commonly used and increasingly incorporating a wide range of sensors and actuators with the potential to capture and display 360º video and metadata, with the power to support more powerful and immersive video user experiences. We propose novel ways to search, navigate and visualize video leveraging the potential of mobile sensors and interfaces in temporal and spatial dimensions. This work was carried out in the context of the ImTV research project, and proposes novel ways to search and access georeferenced videos, where these dimensions are of central importance, especially by video trajectories shape and speed, and by time, using a multimodal interactive mobile interface, involving gestures and movement, with the potential for more natural interactions, increased engagement, sense of presence and immersion. The evaluation based on low and high-fidelity prototypes had positive results. Users found most features useful, satisfactory, sometimes fun, and easy to use. Different options and modalities were found interesting and adequate for different use scenarios that could be identified and suggested, and some concerns and challenges were identified to be taken into account in future developments, towards more flexible and effective interactive content access, through more natural interaction with mobile devices on their own or as second screens to a larger screen on TV or public displays

    Similar works