Distributed multimedia systems

A distributed multimedia system (DMS) is an integrated communication, computing, and information system that enables the processing, management, delivery, and presentation of synchronized multimedia information with quality-of-service guarantees. Multimedia information may include discrete media data, such as text, data, and images, and continuous media data, such as video and audio. Such a system enhances human communications by exploiting both visual and aural senses and provides the ultimate flexibility in work and entertainment, allowing one to collaborate with remote participants, view movies on demand, access on-line digital libraries from the desktop, and so forth. In this paper, we present a technical survey of a DMS. We give an overview of distributed multimedia systems, examine the fundamental concept of digital media, identify the applications, and survey the important enabling technologies.published_or_final_versio

Uma metodologia para a concepção de documentos multimídia

Dissertação (mestrado) - Universidade Federal de Santa Catarina, Centro Tecnológico. Programa de Pós-Graduação em Computação.Apesar de alguns esforços na criação de metodologia para concepção multimídia, nenhuma atende, na prática, as necessidades dos documentos multimídia e das ferramentas de autoria existentes. O objetivo desta dissertação é criar uma metodologia que possa atender as necessidades de apoio ao desenvolvimento de documentos multimídia, num âmbito global, para as ferramentas de autoria existentes. Para a definição desta metodologia, este trabalho avalia as ferramentas de desenvolvimento multimídia e identifica os requisitos de desenvolvimento de documentos multimídia. Além disso, são utilizados os recursos de desenvolvimento de softwares fornecidos pela Engenharia de Software tradicional, os quais serão adaptados às reais características e necessidades da autoria multimídia

Multiple Media Correlation: Theory and Applications

This thesis introduces multiple media correlation, a new technology for the automatic alignment of multiple media objects such as text, audio, and video. This research began with the question: what can be learned when multiple multimedia components are analyzed simultaneously? Most ongoing research in computational multimedia has focused on queries, indexing, and retrieval within a single media type. Video is compressed and searched independently of audio, text is indexed without regard to temporal relationships it may have to other media data. Multiple media correlation provides a framework for locating and exploiting correlations between multiple, potentially heterogeneous, media streams. The goal is computed synchronization, the determination of temporal and spatial alignments that optimize a correlation function and indicate commonality and synchronization between media objects. The model also provides a basis for comparison of media in unrelated domains. There are many real-world applications for this technology, including speaker localization, musical score alignment, and degraded media realignment. Two applications, text-to-speech alignment and parallel text alignment, are described in detail with experimental validation. Text-to-speech alignment computes the alignment between a textual transcript and speech-based audio. The presented solutions are effective for a wide variety of content and are useful not only for retrieval of content, but in support of automatic captioning of movies and video. Parallel text alignment provides a tool for the comparison of alternative translations of the same document that is particularly useful to the classics scholar interested in comparing translation techniques or styles. The results presented in this thesis include (a) new media models more useful in analysis applications, (b) a theoretical model for multiple media correlation, (c) two practical application solutions that have wide-spread applicability, and (d) Xtrieve, a multimedia database retrieval system that demonstrates this new technology and demonstrates application of multiple media correlation to information retrieval. This thesis demonstrates that computed alignment of media objects is practical and can provide immediate solutions to many information retrieval and content presentation problems. It also introduces a new area for research in media data analysis

Representando sincronização multimídia através do modelo reflexivo tempo real RTR

Dissertação (mestrado) - Universidade Federal de Santa Catarina, Centro Tecnológico.O objetivo deste trabalho é validar o Modelo Reflexivo Tempo Real - RTR que explora as potencialidades dos paradigmas de orientação a objetos e reflexão computacional, no sentido de averiguar sua adequação na especificação da sincronização multimídia, visando contribuir para a solução de vários problemas encontrados atualmente nessa classe de especificação. A potencialidade do modelo é demonstrada através de um exemplo envolvendo situações típicas de um cenário multimídia real. Além disso, uma extensão do modelo para especificação de sincronização multimídia é descrita e exemplificada. Adicionalmente, esta dissertação também apresenta um estudo abrangente sobre os requisitos para um modelo multimídia e sobre os principais modelos e linguagens reflexivas

Modelo SMIL I-HTSPN: especificação, análise e geração de código SMIL Boston /

Dissertação (mestrado) - Universidade Federal de Santa Catarina, Centro Tecnológico.A linguagem SMIL tem sido projetada de maneira a facilitar a autoria de apresentações multimídia na Web. Com um editor de texto ela permite definir os componentes de documentos multimídia como texto, imagens, áudio e vídeo na forma de URIs e escalona suas apresentações em paralelo ou em seqüência. A desvantagem é que a manipulação da noção de tempo na forma textual é difícil manipular e modificar. Ao contrário, o modelo I-HTSPN facilita a autoria de apresentações multimídia por ser um sistema gráfico e, além disso, por ser um método formal, permite a especificação e análise do documento, para posterior tradução para o código SMIL Boston. A especificação gráfica de documentos SMIL será obtida graças a uma nova interpretação do modelo I-HTSPN voltada para a especificação, análise e geração de código SMIL Boston. Esta nova interpretação se chama SMIL I-HTSPN e herdará todas as técnicas de análise do HTSPN