7 research outputs found
A Probabilistic Framework for Information Modelling and Retrieval Based on User Annotations on Digital Objects
Annotations are a means to make critical remarks, to explain and
comment things, to add notes and give opinions, and to relate objects.
Nowadays, they can be found in digital libraries and collaboratories,
for example as a building block for scientific discussion on the one
hand or as private notes on the other. We further find them in product
reviews, scientific databases and many "Web 2.0" applications; even
well-established concepts like emails can be regarded as annotations
in a certain sense. Digital annotations can be (textual) comments,
markings (i.e. highlighted parts) and references to other documents
or document parts. Since annotations convey information which is
potentially important to satisfy a user's information need, this
thesis tries to answer the question of how to exploit annotations for
information retrieval. It gives a first answer to the question if
retrieval effectiveness can be improved with annotations.
A survey of the "annotation universe" reveals some facets of
annotations; for example, they can be content level annotations
(extending the content of the annotation object) or meta level ones
(saying something about the annotated object). Besides the annotations
themselves, other objects created during the process of annotation can
be interesting for retrieval, these being the annotated fragments.
These objects are integrated into an object-oriented model comprising
digital objects such as structured documents and annotations as well
as fragments. In this model, the different relationships among the
various objects are reflected. From this model, the basic data
structure for annotation-based retrieval, the structured annotation
hypertext, is derived.
In order to thoroughly exploit the information contained in structured
annotation hypertexts, a probabilistic, object-oriented logical
framework called POLAR is introduced. In POLAR, structured annotation
hypertexts can be modelled by means of probabilistic propositions and
four-valued logics. POLAR allows for specifying several relationships
among annotations and annotated (sub)parts or fragments. Queries can
be posed to extract the knowledge contained in structured annotation
hypertexts. POLAR supports annotation-based retrieval, i.e. document
and discussion search, by applying an augmentation strategy (knowledge
augmentation, propagating propositions from subcontexts like annotations,
or relevance augmentation, where retrieval status values are propagated)
in conjunction with probabilistic inference, where P(d -> q), the probability
that a document d implies a query q, is estimated.
POLAR's semantics is based on possible worlds and accessibility
relations. It is implemented on top of four-valued probabilistic Datalog.
POLAR's core retrieval functionality, knowledge augmentation with
probabilistic inference, is evaluated for discussion and document
search. The experiments show that all relevant POLAR objects, merged
annotation targets, fragments and content annotations, are able to
increase retrieval effectiveness when used as a context for discussion
or document search. Additional experiments reveal that we can determine
the polarity of annotations with an accuracy of around 80%
Sistema multimodal para captura e anotação de vídeo
Dissertação para obtenção do Grau de Mestre em
Engenharia InformáticaActualmente, existe um grande crescimento de popularidade de dispositivos tácteis e multi-toque e, por isso, é necessário cada vez mais o desenvolvimento de aplicações e interfaces que sejam elaboradas especificamente para esse tipo de interacção. Através da caneta digital e do toque humano, esta interacção torna-se natural para o utilizador, pois assemelha-se à interacção humano-papel-caneta. Este tipo de interacção pode ser aplicado a documentos multimédia, em particular ao controlo e à anotação de vídeo digital. Assim como as anotações em publicações impressas promovem a leitura activa, as anotações de vídeo promovem a visualização activa, facilitando a reflexão e a aprendizagem com o enriquecimento do conteúdo do vídeo. As formas de arte performativas, como a dança, são domínios que envolvem várias iterações de ensaio, onde a anotação de vídeo pode melhorar significativamente o processo criativo dos autores.
Assim, a solução proposta tem como objectivo o desenvolvimento de uma ferramenta que suporte a captura e anotação multimodal de vídeo em tempo real, a ser executada num Tablet PC, explorando a interacção bimanual de toque humano com a caneta digital. A ferramenta permite ao utilizador capturar um vídeo através de uma fonte e, simultaneamente, anotá-lo, de forma a documentar segmentos desse vídeo para futura recuperação e pesquisa e aumentar o seu conteúdo, associando-lhe um significado próprio. No âmbito da dança contemporânea, um coreógrafo pode utilizar o sistema a fim de registar e anotar um ensaio ou uma performance ao vivo, actuando como um bloco de notas digital que pode ser revisto e partilhado com os artistas.
Esta proposta está enquadrada no projecto TKB, desenvolvido em colaboração com a Faculdade de Ciências Sociais Humanas da Universidade Nova de Lisboa – FCSH/UNL, que inclui nos objectivos o desenvolvimento de um anotador de vídeo aplicado à dança contemporânea