Counterpoint in Multi-Sensory Composition

As a temporal art form, at the core of much musical composition lies a consideration for the everchanging relationship between materials through time. This is perceived in musical counterpoint, a technique that explores the dynamic relationship between two or more voices. This thesis considers musical composition in context with other forms of art, situating itself in the field of multi-sensory art. As discussed in this thesis, many examples of multi-sensory art lean towards complementary pairing of various sensory and temporal experiences. While a valid approach to the composition of multi-sensory art, the trend often produces works where all artforms follow a similar trajectory. This study uses a practice-based approach to explore multi-sensory composition through the lens of counterpoint, creating a new approach to developing and analysing aesthetic relationships between different sensory art forms. The composition portfolio contains three multi-sensory works comprised of an electronic musical component in relationship with visual, haptic, and gustatory art. The compositional approach is examined through discussing temporal and trajectorial aspects of each sensory art form, as well as an analysis of each work. These works explore various contrapuntal relationships in multi-sensory composition through the design of contrasting rhythmic and trajectorial elements between different art forms. Through literature review and analysis, an understanding of musical counterpoint grounds discussions of both multi-sensory analysis, and compositional process. This includes widening the definition of the ‘musical envelope’ to encompass the perceived intensity of a sensory event, and the consideration of sensory ‘interferences’ in the development of multi-sensory art. Through the composition and analysis of the three portfolio works, a contrapuntal approach to multi-sensory composition is presented that aims to provide both coherence and independence between various art forms

AVALIANDO PREFERÊNCIAS MUSICAIS DE CRIANÇAS NO ESPECTRO AUTISTA: IMPLICAÇÕES PARA A TERAPIA

Desde muito cedo, o Homem e a Sociedade em geral parecem ter-se edificado à volta dos indivíduos ditos normais, excluindo e, até mesmo, negligenciando todos os que de alguma forma se afastavam da dita «norma». O Transtorno do Espectro Autista (TEA) é uma perturbação que afecta o desenvolvimento da criança, apresentando alguns entraves à sua educação e à sua vida social, e sobre o qual ainda existem muitas dúvidas ao nível científico (Sulkes, 2022). Segundo uma pesquisa realizada em 2022 pelo Centro de Controle de Doenças e Prevenção (CDC) dos Estados Unidos, existe cada vez mais um aumento na prevalência do Transtorno do Espectro Autista (TEA): uma em cada 44 crianças aos oito anos de idade é diagnosticada com TEA. Nos últimos anos verificou-se um desenvolvimento significativo nas investigações relativas ao Transtorno do Espectro do Autista. Com o aumento na prevalência de casos, acresce a urgência de elaborar medidas para a realização de diagnósticos cada vez mais precoces, bem como a necessidade de criar estratégias terapêuticas interdisciplinares que procurem melhorar a qualidade de vida destes indivíduos (Sulkes, 2022). Desde tempos remotos, a música é vista como uma linguagem universal, que se encontra bem presente na história da humanidade e que tem a capacidade de contribuir para o desenvolvimento da inteligência e para a integração do ser humano (Silva, 2012). Devido às especificidades e perturbações do relacionamento social características crianças com Transtorno de Espectro Autista, estudos realizados, apontam a música como um potente recurso terapêutico para auxiliar as mesmas (Marquez-Garcia et al., 2021; Mayer-Benarous et al., 2021; Shahrudin et al., 2022). As terapias baseadas na música, estão a ser cada vez mais utilizadas para apoiar crianças com autismo com resultados clínicos promissores. No entanto, ainda é escassa a compreensão de quais são os sons mais apropriados a utilizar em intervenções de Musicoterapia para crianças com TAE (Cibrian et al., 2018). Neste pressuposto, revela-se cada vez mais urgente perceber quais são as suas preferências sonoras e musicais, para possibilitar o desenvolvimento de abordagens musicais e estímulos sonoros individualizados, capazes de atender às demandas das especificidades das crianças com este transtorno (Cibrian et al., 2018; Levasseur et al. em 2020). Este estudo experimental e transversal de carácter quantitativo e qualitativo, foi fundamentando em dois domínios: O Transtorno do Espectro Autista e Estímulos Sonoros. Através desta experiência pretendeu-se investigar de que forma a música pode efectivamente funcionar como medida terapêutica em crianças com Transtorno do Espectro Autista, e mais especificamente, quais os estímulos sonoros ou preferências sonoras, mais plausíveis de poderem nesses ganhos. O projeto contou com a parceria do Centro Universitário do Estado do Pará - Área das Ciências Ambientais, Biológicas e da Saúde - Professoras e alunos dos Cursos de Fisioterapia, Psicologia e Ciência da Computação - e investigou as preferências musicais e sonoras em crianças com diagnóstico de TEA, com idades compreendidas entre os 2 e os 6 anos, de ambos os sexos e com nível de suporte 1 ou 2. Paralelamente, propôs-se investigar quais as preferências dentro dos vários parâmetros sonoros, bem como perceber se existem correlações entre os mesmos, e ainda, se essa preferência é constante ou alterável entre sessões de Musicoterapia. Adicionalmente, objectivou perceber se as preferências musicais habituais e cotidianas das crianças, têm correlação com as preferências sonoras dentro do contexto terapêutico por Musicoterapia. Espera-se que este estudo possa contribuir para um melhor conhecimento da problemática do Transtorno do Espectro Autista, bem como de quais preferências sonoros e musicais preferenciais em crianças dentro deste espectro, e mais plausíveis de resultarem em benefícios terapêuticos e clínicos reais

Methods and Technologies for the Analysis and Interactive Use of Body Movements in Instrumental Music Performance

List of related publications: http://www.federicovisi.com/publications/A constantly growing corpus of interdisciplinary studies support the idea that music is a complex multimodal medium that is experienced not only by means of sounds but also through body movement. From this perspective, musical instruments can be seen as technological objects coupled with a repertoire of performance gestures. This repertoire is part of an ecological knowledge shared by musicians and listeners alike. It is part of the engine that guides musical experience and has a considerable expressive potential. This thesis explores technical and conceptual issues related to the analysis and creative use of music-related body movements in instrumental music performance. The complexity of this subject required an interdisciplinary approach, which includes the review of multiple theoretical accounts, quantitative and qualitative analysis of data collected in motion capture laboratories, the development and implementation of technologies for the interpretation and interactive use of motion data, and the creation of short musical pieces that actively employ the movement of the performers as an expressive musical feature. The theoretical framework is informed by embodied and enactive accounts of music cognition as well as by systematic studies of music-related movement and expressive music performance. The assumption that the movements of a musician are part of a shared knowledge is empirically explored through an experiment aimed at analysing the motion capture data of a violinist performing a selection of short musical excerpts. A group of subjects with no prior experience playing the violin is then asked to mime a performance following the audio excerpts recorded by the violinist. Motion data is recorded, analysed, and compared with the expert’s data. This is done both quantitatively through data analysis xii as well as qualitatively by relating the motion data to other high-level features and structures of the musical excerpts. Solutions to issues regarding capturing and storing movement data and its use in real-time scenarios are proposed. For the interactive use of motion-sensing technologies in music performance, various wearable sensors have been employed, along with different approaches for mapping control data to sound synthesis and signal processing parameters. In particular, novel approaches for the extraction of meaningful features from raw sensor data and the use of machine learning techniques for mapping movement to live electronics are described. To complete the framework, an essential element of this research project is the com- position and performance of études that explore the creative use of body movement in instrumental music from a Practice-as-Research perspective. This works as a test bed for the proposed concepts and techniques. Mapping concepts and technologies are challenged in a scenario constrained by the use of musical instruments, and different mapping ap- proaches are implemented and compared. In addition, techniques for notating movement in the score, and the impact of interactive motion sensor systems in instrumental music practice from the performer’s perspective are discussed. Finally, the chapter concluding the part of the thesis dedicated to practical implementations describes a novel method for mapping movement data to sound synthesis. This technique is based on the analysis of multimodal motion data collected from multiple subjects and its design draws from the theoretical, analytical, and practical works described throughout the dissertation. Overall, the parts and the diverse approaches that constitute this thesis work in synergy, contributing to the ongoing discourses on the study of musical gestures and the design of interactive music systems from multiple angles

Music in Evolution and Evolution in Music

Music in Evolution and Evolution in Music by Steven Jan is a comprehensive account of the relationships between evolutionary theory and music. Examining the ‘evolutionary algorithm’ that drives biological and musical-cultural evolution, the book provides a distinctive commentary on how musicality and music can shed light on our understanding of Darwin’s famous theory, and vice-versa. Comprised of seven chapters, with several musical examples, figures and definitions of terms, this original and accessible book is a valuable resource for anyone interested in the relationships between music and evolutionary thought. Jan guides the reader through key evolutionary ideas and the development of human musicality, before exploring cultural evolution, evolutionary ideas in musical scholarship, animal vocalisations, music generated through technology, and the nature of consciousness as an evolutionary phenomenon. A unique examination of how evolutionary thought intersects with music, Music in Evolution and Evolution in Music is essential to our understanding of how and why music arose in our species and why it is such a significant presence in our lives

Acerca de lo narrado en la performance : Un estudio de la experiencia musical del performer a través de la analogía del narrador

Esta tesis aborda la práctica de la performance musical desde un enfoque social, entendiendo que el músico performer -quien lleva a cabo la interpretación en público de una obra musical- es una persona que cumple un rol en un contexto musical determinado de la vida social. La analogía entre narrativa y música ha ocupado a teóricos e investigadores en las últimas décadas desde un enfoque musicológico, estableciendo relaciones de correspondencia desde el análisis de la narrativa literaria hacia el análisis de los textos musicales (partituras). Estos enfoques son discutidos en términos de entender a la música y a las obras musicales como producciones intencionales humanas, considerando el modo en que la narración es concebida en el campo de la psicología social y la cognición social. La investigación aquí presentada realiza un estudio de entrevistas a músicos que se dedican a la performance de obras instrumentales de la tradición musical centroeuropea. La metodología cualitativa intenta obtener descripciones de la experiencia y concepciones acerca de la práctica profesional, aproximándose de esta manera al punto de vista del artista. Las entrevistas semi-estructuradas que se realizaron a los músicos se enfocan en el proceso de preparación de las obras musicales desde la partitura, pasando por sus instancias de trabajo en el ensayo, la performance, y las instancias posteriores a la actuación. Las conversaciones con los músicos no abordan a la narración musical de un modo directo y se ocupan, en cambio, de conocer en profundidad la experiencia personal del performer. El análisis del contenido de las entrevistas se propone obtener descripciones de la performance como intencionalidades del performer en relaciones interactivas reales o virtuales con la obra musical, el compositor, la partitura y el público, indagando también la participación o presencia de otras personas que pueden estar involucradas con el músico en su actividad. Los resultados son interpretados a través de relaciones análogas entre la narración y la performance, así como también entre el narrador y el performer. Las conclusiones no intentan generalizar acerca de la actividad del músico en la performance, sino reflexionar y describir a la disciplina musical desde la mirada del perfomer como una actividad social.Facultad de Bellas Arte