Coding in the context of collaborative, interactive performance

The context of collaborative, interactive performance and installation is a challenging environment for developing technology that will enable creating such artistic works. Code becomes a medium in which artists express themselves and the challenges of writing code in a context where problems are created as they are being solved demand flexibility and realtime control over the code that defines the interaction. In particular, show control systems that can deal with interactive and improvisational elements are a topic for further investigation. This article reflects on various issues that come up in this context

Wellenfeldsynthese und elektro-akustische Musik, mit einem speziellen Fokus auf die Reproduktion von willkürlich geformten Schallquellen

Seit Beginn der elektroakustischen Musik stößt das Thema des räumlichen Klanges unter Komponisten auf großes Interesse. Durch die kontinuierliche technische Entwicklung konnten und können diesbezüglich zunehmend Methoden zur Realisierung von Raumklang erreicht und neue Konzepte angeregt werden. Die Wellenfeldsynthese (WFS) zeichnet eine gewichtige Methode aus, die eine klare Lokalisation von virtuellen Klangquellen für einen großen Hörraum kreiert. Trotz des hierfür notwendigen hohen technischen und finanziellen Aufwands gewinnt die Wellenfeldsynthese international an vielen Instituten an Popularität, wodurch Komponisten und Klangkünstlern in zunehmendem Maße Zugang zu dieser Technologie ermöglicht wird. In dieser Beziehung zwischen Technologie und Künstlern bietet sich die Möglichkeit der Erforschung der Stärken und Schwächen, ebenso wie der Weiterentwicklung der Technologie bei gleichzeitigem Herstellen von Inhalten durch die Künstler. Dieses ist auch der Schlüssel des Erfolges, um die Nachfrage für die WFS anzuregen und ihr einen größeren Markt zu erschließen. Um eine größere und detailliertere Kontrolle über Klangquellen liefern zu können, wird in dieser Dissertation eine Methode vorgestellt für die Reproduktion (mittels WFS) von willkürlich geformten Klang-aussendenden Objekten. Diese Methode geht von einer bekannten, beziehungsweise einer definierten Geometrie der Oberfläche eines Objektes aus und nimmt eine bekannte oder definierte Schwingung dieser Oberfläche an. Mit diesen Parametern werden Signale für ein WFS-Lautsprecher-Array, durch die Anwendung eines angepassten WFS-Operator berechnet, welcher auf die Position über und unter der horizontalen Ebene sowie die Beugung des Klangs um das Objekt herum Bezug nimmt. Diese Methode wird durch die Kalkulation einiger Beispiele überprüft, wobei die Effekte von Größe-, Form-, Verfeinerungs-, Distanz- und Beugungsparametern auf das resultierende von den Lautsprechern wiedergegebene Wellenfeld ausgewertet werden. Das Beugungsmodell ergibt plausibele Resultate; es tritt aber ein zweite Stufe'' der Beugung auf, auf dem Lautsprecher-Array. Ein Hörtest hat deutlich gezeigt, das die Schallquellen, die auf diese Weise wiedergegeben wurden, deutlich wahrnehmbare Eigenschaften aufweisen. Als Erstes ist ein Effekt auf die Klangfarbe zu hören, aber des weiteren auch in verschiedenen räumlichen Parametern wie Quellenbreite, Lokalisation und Räumlichkeit.Spatial sound has long been a topic of interest in electro-acoustic music. With continual technical advancements of methods to achieve spatialisation of sound, an increase in the realisation of spatial sound ideas can be achieved, while concurrently giving birth to new concepts in this area. Wave Field Synthesis (WFS) provides a compelling method, as it excels in creating a clear localisation of a virtual sound source for a large listening area. Despite the necessary hardware investment, WFS is gaining popularity at many institutes - internationally - providing increasing numbers of composers and sound artists with access to the technology. This relationship between technology and composer provides an environment for exploration of strengths and weaknesses, as well as driving forward development of the technology while composers are creating the content. This can be considered a key element in creating a demand for WFS in commercial and academic markets. To provide more extensive control over sound sources, this thesis proposes a method for the reproduction of arbitrarily shaped objects emitting sound, using WFS. The method begins with a known or defined geometry of the object surface, and assumes a known or defined vibration of this surface. Using these parameters, signals for a WFS loudspeaker array are calculated, applying an adapted WFS operator that takes into account the elevation above or below the horizontal plane, and diffraction of the sound around the object itself. The method is validated through the calculation of several examples, evaluating the effects of size, shape, refinement, distance and diffraction on the resulting wave field emitted by the loudspeakers. The diffraction model gives plausible results, but a second stage'' of diffraction occurs at the WFS reproduction array. A listening test shows that sound objects reproduced in this way cause significant perceptual effects primarily on tone colouration, but also in various spatial parameters such as source width, localisation and spaciousness

Instrumentality, perception and listening in crossadaptive performance

Crossadaptive processing describes situations where one performer’s output effects the audio processing of another, thus imposing direct modulation on the sound of another performer’s instrument. This is done by analysis of the acoustic signal, extracting expressive features and creating modulation vectors that can be mapped to audio processing parameters. Crossadaptive performance can be situated between the performance practices of the audio processing musician, augmented (acoustic) instruments, live algorithms, group improvisation and interconnected musical networks. The addition of crossadaptive processing to these musical practices brings up questions of agency and instrumentality. Performance with crossadaptive techniques produces complex behaviours that are difficult to describe by the performer or the listener. This paper covers issues of transparency and technical language, instrument and ensemble learning. For the performer a shared ensemble identity may emerge. And for the listener we discuss the role of intention and emergent musical behaviour.http://www.liveinterfaces.org/2018

Modality

(Abstract to follow

Ins and Outs - SuperCollider and external devices

Baalman M, Kersten S, Bovermann T. Ins and Outs - SuperCollider and external devices. In: Wilson S, Cottle D, Collins N, eds. The SuperCollider Book. Cambridge: MIT Press; 2011: 105-126