Das künstlerische Potential von Sound in Motion

Interaktive Kunstinstallationen gedeihen auf der Beziehung zwischen dem Publikum und der Umgebung. Zu den mächtigsten Werkzeugen, um diese Beziehung zu gestalten, gehört Sound & MDASH; speziell die Echtzeit-Audio-Feedbackschleife. Wenn ein Mikrofon Umgebungsgeräusche, Bewegungen oder Sprache aufnimmt und dieses Signal verarbeitet und durch Lautsprecher abgespielt wird, wird der Raum selbst zu einem Instrument. Die Feedbackschleife verwandelt passives Zuhören in aktive Teilnahme, so dass Besucher die Klanglandschaft einfach durch Bewegen, Sprechen oder Atmen beeinflussen können.

Der Aufbau dieser Systeme erfordert mehr als nur das Anschließen eines Mikrofons an einen Lautsprecher. Sie müssen den Signalfluss, die digitale Signalverarbeitung (DSP), Hardware-Einschränkungen und die Art und Weise verstehen, wie die Schleife so ausdrucksvoll bleibt, dass sie sich nicht in unkontrollierbares Rauschen verwandelt. Dieser Artikel geht durch den gesamten Bereich des Entwerfens und Implementierens von Echtzeit-Audio-Feedback-Schleifen für interaktive Kunst & MDASH; von Kernkonzepten und Komponentenauswahl bis hin zu Programmierung, kreativen Techniken und Sicherheitspraktiken.

Kernkonzepte von Audio-Feedback in interaktiven Räumen

Was ist ein Audio Feedback Loop?

Eine Audio-Feedbackschleife tritt auf, wenn ein Ausgangssignal zurück in den Eingang des gleichen Systems geleitet wird. In seiner einfachsten Form speist ein Mikrofon in einen Lautsprecher ein, und der Ausgang des Lautsprechers wird vom Mikrofon wieder aufgenommen. Das Signal zirkuliert und baut auf sich selbst auf. Bei sorgfältiger Steuerung erzeugt dieser Zyklus reiche, sich entwickelnde Klangfarben, Drohnen und Texturen, die durch Filterung, Verzögerung und Modulation geformt werden können.

In einem Installationskontext ist die Schleife kein Fehler, den man vermeiden sollte & mdash; sie ist das Kernmedium. Der Künstler definiert, wie sich die Schleife verhält, welche Frequenzen sie betont, wie sie auf Umweltveränderungen reagiert und wie Zuschauer sie mit ihrer Anwesenheit oder ihren Handlungen beeinflussen können.

Schlüsselparameter, die den Loop definieren

  • Gain-Struktur: Die Lautstärke des Signals in jeder Stufe bestimmt, ob die Schleife aufrechterhält, zerfällt oder in heulende Rückmeldung eskaliert.
  • Häufigkeitsgehalt: Filter entfernen oder verstärken bestimmte Frequenzen, formen den Toncharakter und verhindern harte Spitzen.
  • Latenz: Schon wenige Millisekunden Verzögerung verändern die Phasenbeziehung des Signals und verändern das Feedbackmuster dramatisch.
  • Räumliche Anordnung: Die physische Platzierung von Mikrofonen und Lautsprechern beeinflusst, welche Geräusche aufgenommen werden und wie sie interagieren.
  • Nichtlinearität: Clipping, Sättigung und andere nichtlineare Prozesse führen zu Oberschwingungen und Komplexität, die die Schleife unvorhersehbar und organisch machen.

Hardware-Grundlagen: Die Wahl der richtigen Komponenten

Die Hardware, die Sie auswählen, formt direkt, was die Installation leisten kann. Jede Komponente führt ihren eigenen Rauschpegel, Frequenzgang und Dynamikbereich ein. Der Aufbau einer zuverlässigen Rückkopplungsschleife bedeutet, dass Sie die Komponenten Ihren künstlerischen Absichten anpassen und gleichzeitig den Signalweg sauber und kontrollierbar halten.

Mikrofone

Bei Rückkopplungsschleifen sind Kondensatormikrofone üblich, weil sie einen breiten Frequenzbereich erfassen und auf subtile Veränderungen in der Umgebung reagieren. Kontaktmikrofone (Piezo-Pickups) funktionieren gut, wenn Sie Vibrationen von Oberflächen statt von Luftschall einfangen möchten. Dynamische Mikrofone sind robuster und handhaben hohe Schalldruckpegel, aber ihre geringere Empfindlichkeit kann sie weniger ansprechend für leise Interaktionen machen.

Platzierungsfragen: Ein Mikrofon in der Nähe eines Lautsprechers erzeugt eine aggressivere Schleife, während ein Mikrofon, das weiter entfernt oder vom Lautsprecher entfernt platziert wird, eine sanftere, umgebungsbezogenere Reaktion erzeugt.

Sprecher

Die meisten Flexibilität bieten Full-Range-Lautsprecher, aber Sie können auch spezielle Treiber für bestimmte Frequenzbänder verwenden. Kleine Monitore funktionieren für intime Installationen, während große PA-Lautsprecher einen Galerieraum füllen. Betrachten Sie das Dispersionsmuster des Lautsprechers & mdash; schmale Dispersion gibt Ihnen mehr Kontrolle darüber, wohin der Ton geht, während breite Dispersion den Raum füllt, aber das Feedback schwieriger macht zu lokalisieren.

Audio-Schnittstelle und Verarbeitungs-Hardware

Eine Audioschnittstelle mit Treibern mit niedriger Latenz ist unerlässlich. Suchen Sie nach Schnittstellen mit mindestens zwei Ein- und Ausgängen (ein Stereopaar), obwohl Mehrkanalschnittstellen Raumisierungsmöglichkeiten eröffnen. Die Schnittstelle wandelt analoge Mikrofonsignale in digitale Daten um, die Ihre Software verarbeiten kann, und wandelt das verarbeitete digitale Audio zurück in ein analoges Signal für die Lautsprecher um.

Für das Computergerät ist ein Laptop oder Desktop-Computer mit einer DAW- oder visuellen Programmierumgebung die flexibelste Option. Für permanente Installationen kann ein Raspberry Pi 4 oder 5 mit einer USB-Audioschnittstelle eine leichte DSP-Software wie Pure Data oder SuperCollider ausführen und bietet eine kompakte, stromsparende Lösung.

Softwareansätze: Von der visuellen Programmierung bis zum Code

Max/MSP und reine Daten

Diese visuellen Programmierumgebungen sind für Audio und Medien in Echtzeit konzipiert. In Max/MSP werden Objekte zusammengefügt, die Audioeingänge, -ausgänge, Filter, Oszillatoren und Logik repräsentieren. Pure Data (Pd) ist das Open-Source-Geschwister mit einem ähnlichen Paradigma. Beide geben Ihnen eine präzise Kontrolle über jedes Sample im Audiostream.

Typische Feedback-Patch-Struktur:

  1. adc~ (Analog-Digital-Wandler) den Mikrofoneingang ausliest.
  2. Eine Reihe von Filterobjekte (z. B.) lop~, Hüfte, Biquad~) den Frequenzinhalt formen.
  3. Verzögerungsleitungen ()Delwrite~ / Tiefseerot) zeitbasierte Effekte einleiten.
  4. Gain-Objekte Kontrollieren Sie den Pegel und verhindern Sie ein auslaufendes Feedback.
  5. dac~ (Digital-Analog-Wandler) sendet das verarbeitete Signal an die Lautsprecher.

SuperCollider

SuperCollider ist eine textbasierte Programmiersprache für die Audiosynthese. Es bietet extreme Flexibilität und Leistung, so dass es für komplexe Installationen geeignet ist. Localin und LocalOut koppeln, um Signale intern zu routen, kombiniert mit Filter UGens (Einheitengeneratoren) und Umschlägen, um die Antwort zu formen.

Beispielkonzept (zur Veranschaulichung):

Dieses Snippet liest vom Eingangskanal 0, wendet ein Tiefpassfilter an, das durch die Mausposition gesteuert wird, mischt das vorherige Feedbacksignal mit einer kleinen Verstärkung und schreibt das Ergebnis auf den internen Feedbackbus.

Ableton Live und Max für Live

Für Künstler, die einen DAW-Workflow bevorzugen, bietet Ableton Live in Kombination mit Max for Live-Geräten eine hybride Umgebung. Sie können Feedback-Patches in Max erstellen und sie als Geräte in die Sitzungsansicht von Live laden. Dieser Ansatz ist ideal für Rapid Prototyping und für Installationen, in denen Sie zusätzliche Elemente neben der Feedbackschleife aufnehmen oder auslösen möchten.

Kreative Techniken zur Gestaltung des Feedbacks

Sobald die Grundschleife läuft, beginnt die eigentliche Kunst. Die folgenden Techniken geben Ihnen Möglichkeiten, das Feedback in etwas Ausdrucksvolles und Responsives zu verwandeln.

Filterung: Steuerung des Tonalzentrums

Filter sind der direkteste Weg, um Feedback zu formen. Ein Tiefpassfilter, der Frequenzen über, sagen wir, 500 Hz abrollt, erzeugt eine warme, basslastige Drohne. Ein Hochpassfilter, der alles unter 1 kHz dämpft, erzeugt eine spröde, metallische Textur. Bandpassfilter isolieren einen schmalen Frequenzbereich, der eine singende, fast stimmliche Qualität erzeugen kann. Durch das Überstreichen von Filterparametern im Laufe der Zeit, entweder manuell oder mit einem LFO, entwickelt sich das Feedback organisch.

Delay: Erzeugung von rhythmischen und texturellen Schichten

Das Hinzufügen einer Verzögerungslinie zum Rückkopplungspfad führt zu einer zeitlichen Dimension. Kurze Verzögerungen (unter 100 ms) erzeugen Kammfiltereffekte, die den Klang färben. Verzögerungen im Bereich von 200 –500 ms erzeugen unterschiedliche Echos, die sich in rhythmische Muster überlagern können. Längere Verzögerungen (mehrere Sekunden) erzeugen Schleifeneffekte, die Drohnen und überlappende Texturen bilden. Wenn die Verzögerungszeit leicht moduliert wird, biegt sich die Tonhöhe auf subtile Weise, was Bewegung hinzufügt.

Modulation: Das System atmen

Wenn man die Modulation auf jeden Parameter in der Kette anwendet, wird das Feedback nicht statisch. Man kann den Filterabschnitt mit einer langsamen Sinuswelle modulieren, die Verzögerungszeit mit einer Sample-and-Hold-Zufallsquelle wackeln lassen oder Amplitudenmodulation anwenden, um Tremolo-Effekte zu erzeugen. Das Ziel ist es, genügend Variation einzuführen, damit sich das System lebendig anfühlt, ohne chaotisch zu werden.

Granular Processing: Fragmentierung des Sounds

Granulare Synthese zerlegt Audio in winzige Segmente (Körner) und setzt sie wieder zusammen. Wenn sie in einer Rückkopplungsschleife angewendet wird, erzeugt granulare Verarbeitung Klangwolken, die schimmern und driften. Jedes Korn fängt ein Fragment des Rückkopplungssignals ein, und durch Variation der Korngröße, Dichte und Tonhöhe erhalten Sie Texturen, die von ätherischen Wäschen bis hin zu dichtem, knisternden Rauschen reichen.

Spatialisierung: Platzieren von Sound im physischen Raum

Mit mehreren Lautsprechern können Sie das Feedback an verschiedene Orte leiten und so ein Gefühl der Bewegung erzeugen. Wenn Sie das Signal langsam zwischen den Lautsprechern schwenken, wandert der Klang durch den Raum. In einem quadraphonen oder okthophonen Setup können Sie Amplitudenschwenken (vektorbasiert) oder fortgeschrittenere Techniken wie Ambisonics verwenden. Die Raumordnung verwandelt den Installationsraum selbst in eine Leinwand für das Feedback.

Zuschauer-Interaktion: Das Publikum zu einem Teil des Loops machen

Die ansprechendsten Installationen lassen Besucher den Klang beeinflussen. Sie können Sensoren wie Ultraschall-Entfernungssensoren, Bewegungsdetektoren oder kamerabasiertes Tracking (über OpenCV oder MediaPipe) verwenden, um Körperposition, Geste oder Bewegung auf Parameter in der Feedback-Kette abzubilden. Zum Beispiel steuert der Abstand einer Person von einem Sensor den Filterabschnitt, je näher sie kommen, desto heller der Klang. Oder eine Handwelle erhöht die Verzögerungsrückmeldung und verdickt die Textur.

Wenn die Zuschauer erkennen, dass ihre Handlungen den Klang formen, wird die Installation zu einer Zusammenarbeit zwischen Mensch und Maschine.

Praktischer Projekt-Walpthrough: Eine Feedback-basierte Sound-Skulptur

Lasst uns durch ein konkretes Projekt gehen, um zu sehen, wie diese Teile zusammenpassen. Dieses Beispiel verwendet erschwingliche, weit verbreitete Hardware und Pure Data, die es für das Prototyping zugänglich machen, bevor es hochskaliert wird.

Ziel

Erstellen Sie eine rückkopplungsbasierte Klangskulptur, bei der die Bewegung der Besucher das Timbre und die Intensität der Schleife beeinflusst. Die Installation verwendet ein Kontaktmikrofon, das an einer Resonanzfläche (einem Metallblech oder einer Holzkiste) befestigt ist, einen Lautsprecher, der zur Oberfläche ausgerichtet ist, und einen Ultraschall-Entfernungssensor, der die Nähe der nächsten Person misst.

Hardware-Liste

  • Raspberry Pi 4 (oder 5) mit SD-Karte, Stromversorgung und Gehäuse
  • USB-Audioschnittstelle (z. B. Behringer U-Phoria UMC204HD)
  • Kontaktmikrofon mit 1/4-Zoll- oder XLR-Ausgang (z. B. PZM-Mikrofon oder Piezo-Pickup mit Vorverstärker)
  • Aktiver Monitorlautsprecher oder PA-Lautsprecher mit Power
  • HC-SR04 Ultraschall-Entfernungssensor (oder ein Infrarot-Entfernungssensor für geringere Kosten)
  • Brotplatte, Brückendrähte und Widerstände für den Sensor
  • XLR- und TS-Kabel nach Bedarf

Software-Setup

  1. Installieren Sie Raspberry Pi OS Lite (kein Desktop) und richten Sie Netzwerk- und SSH-Zugriff ein.
  2. Installieren Sie Pure Data (pd) über apt: .
  3. Installieren Sie Komparator externe Bibliothek: oder Download , um serielle Daten vom Sensor zu lesen.
  4. Erstellen Sie einen Pure Data Patch mit folgender Struktur:

Patchstruktur:

  • [Comport] Ein Objekt liest Entfernungswerte vom Sensor über USB seriell bei 9600 Baud aus.
  • Skalieren Sie den Abstandswert auf einen Bereich, der für die Filterfrequenz geeignet ist (z. B. 200 Hz bis 4000 Hz).
  • [adc~ 1] liest das Kontaktmikrofon vom Eingang 1 des Audiointerfaces aus.
  • Einen Bandpassfilter anwenden [bp~] mit der skalierten Frequenz.
  • Fügen Sie eine Delay Line hinzu [delwrite~] mit einer Dauer von 300 ms und einer durch einen anderen skalierten Wert vom Sensor angepassten Rückmeldung.
  • Weiterleitung des verarbeiteten Signals an [dac~ 1 2] (links und rechts) ausgegeben.
  • Hinzufügen a [Clip~] Objekt zum Verhindern von Clipping und einem [line~] um Parameteränderungen zu glätten.

Kalibrierung und Prüfung

  1. Stellen Sie den Lautsprecher in einem moderaten Abstand von der Resonanzfläche (beginnen Sie etwa 30 cm).
  2. Beginnen Sie mit dem Master Gain Low (etwa -20 dB) und der Filterfrequenz in der Mitte seines Bereichs.
  3. Nach und nach erhöhen Sie den Gewinn, bis Sie hören, dass das Feedback zu klingeln beginnt.
  4. Bewegen Sie den Abstandssensor in die Nähe einer flachen Oberfläche, die den Ultraschallpuls reflektieren kann, und programmieren Sie ihn, um eine Änderung des Filters auszulösen, wenn sich eine Person in Reichweite befindet.
  5. Testen Sie mit einer Person, die sich dem Sensor nähert. Der Filter sollte bei Annäherung nach oben kehren, wodurch die Rückmeldung heller wird, und beim Weggehen zurückfallen.

Diese einfache Struktur gibt dem Besucher eine klare, unmittelbare akustische Reaktion auf seine Bewegung. Das Metallblech oder die Holzbox vibriert sympathisch mit dem Lautsprecher und fügt physische Resonanz hinzu, die den akustischen Charakter auf subtile Weise verändert.

Sicherheit und Best Practices für Feedback-Installationen

Unkontrolliertes Feedback kann plötzliche, extrem laute Geräusche erzeugen, die das Gehör und die Geräte beschädigen.

Gain Struktur und Limitierung

Verwenden Sie einen Kompressor oder Begrenzer am Master-Ausgang. Stellen Sie den Schwellenwert so ein, dass die Rückmeldung niemals einen sicheren Schalldruckpegel überschreitet (normalerweise um 85 –90 dB für Galerieräume, obwohl lokale Vorschriften überprüfen). [Clip~] Objekt in Pd oder a Begrenzer In Max zum Hardclip der Ausgabe. Verlassen Sie sich niemals ausschließlich auf Softwarelimitierung; ein Hardwarelimiter zwischen dem Interface-Ausgang und dem Lautsprecher fügt einen Fail-Safe hinzu.

Überwachung des Systems

Während der Installation den Ton in Echtzeit überwachen. Verwenden Sie Kopfhörer, die an den Kopfhörerausgang des Audiointerfaces angeschlossen sind, um genau zu hören, was die Software sendet. Gehen Sie durch den Raum, um nach Hotspots zu suchen, an denen sich Feedback aufbauen könnte. Platzieren Sie Mikrofon und Lautsprecher so, dass der direkte Weg zwischen ihnen behindert oder ausgerichtet ist, um die Kopplung zu minimieren.

Strom und Konnektivität

Ein geeignetes Kabelmanagement einsetzen, um Gefährdungen durch Auslösung und versehentliche Trennungen zu vermeiden, jedes Kabel an beiden Enden beschriften, einen Stromkonditionierer oder ein unterbrechungsfreies Stromversorgungsgerät (USV) für das Computergerät und eine Audioschnittstelle verwenden, um Abstürze während einer Aufführung oder Ausstellung zu verhindern.

Zugänglichkeitsüberlegungen

Nicht alle Besucher werden auf den Ton auf die gleiche Weise reagieren. Geben Sie visuelle Hinweise (LEDs oder Projektionen), die mit dem Audio-Feedback korrelieren, so dass taube und schwerhörige Besucher die Interaktion immer noch wahrnehmen können. Halten Sie den Schalldruck auf einem Niveau, das Menschen mit Hörempfindlichkeiten keine Beschwerden bereitet, und bieten Sie Kopfhörer oder eine ruhige Zone in der Nähe.

Weiter gehen: Fortgeschrittene Techniken und Forschung

Sobald Sie die grundlegende Feedbackschleife beherrschen, gibt es viele Richtungen zu erkunden. Die Erforschung der Arbeit anderer Künstler und Ingenieure kann neue Ansätze inspirieren.

Unendliches Langzeit-Feedback

Durch sorgfältiges Filtern und Eingrenzen der Rückmeldungen ist es möglich, Systeme zu schaffen, die unbegrenzt mit minimaler Drift laufen. Diese Installationen werden zu Schalllandschaften, die sich über Tage oder Wochen entwickeln und sich subtil verändern, wenn sich die Umgebung verändert (Temperatur, Feuchtigkeit, Umgebungsschall). Ryoji Ikeda Oft erforscht minimale, mathematisch präzise Rückmeldungen, die eine unendliche Dauer nahelegen.

Machine Learning im Loop

Neuronale Netze können den Zustand der Rückkopplung klassifizieren und Parameter intelligent einstellen. Beispielsweise könnte ein kleines neuronales Netz, das auf Spektrogrammen trainiert ist, erkennen, wenn die Rückkopplung zu hart wird, und automatisch den Verstärkungsgrad reduzieren oder einen Filter verschieben. Dieser Ansatz, manchmal als Wahrnehmungsrückkopplungssteuerung bezeichnet, hält das System ohne manuelles Eingreifen in einem gewünschten Bereich.

Multi-Channel und Ambisonic Feedback

Mit mehreren Mikrofonen und Lautsprechern wird das Feedback zu einem räumlichen Instrument. Jedes Mikrofon nimmt eine andere Mischung aus direktem und reflektiertem Ton auf, und die Software kann diese Signale leiten und schwenken, um komplexe, wirbelnde Schallfelder zu erzeugen. Ambisonics bietet einen mathematischen Rahmen für die Kodierung und Dekodierung von 3D-Sound, so dass es möglich ist, Feedback-Signale überall in der Sphäre um den Hörer herum zu platzieren.

Physikalische Modellierung und Resonatoren

Anstatt die tatsächliche physikalische Resonanz eines Raumes zu nutzen, kann man Resonanzkörper in Software simulieren. Eine Bank von Bandpassfiltern, die auf die Modi einer Violine oder einer Metallplatte abgestimmt sind, erzeugt eine synthetische Resonanz, die auf Eingaben reagiert. Wenn Feedback durch diese simulierten Resonatoren geleitet wird, nimmt der Klang den Charakter des virtuellen Objekts an. Projekte wie Knopf und SCHLAG bieten leistungsstarke Werkzeuge für die Gestaltung solcher digitalen Resonatoren.

Schlussfolgerung

Audio-Feedback-Schleifen in Echtzeit sind eines der direktesten und leistungsstärksten Werkzeuge, um interaktive Soundinstallationen zu erstellen. Das Feedback selbst ist ein lebendiges, atmendes System, das auf jede Veränderung in der Umgebung und jede Geste des Publikums reagiert. Durch das Verständnis der Hard- und Softwaregrundlagen, die Anwendung kreativer Techniken und die Einhaltung von Sicherheitsrichtlinien können Sie Installationen bauen, die sich wirklich ansprechend und endlos faszinierend anfühlen.

Die besten Feedback-Installationen balancieren Kontrolle mit Überraschung. Sie geben dem Publikum genug Einfluss, um sich selbst zu fühlen, aber das System birgt genug Geheimnis, um es weiter zu erforschen. Beginnen Sie mit einer einfachen Schleife, hören Sie genau zu und lassen Sie sich von dem Feedback beibringen, was es werden will.

Zusätzliche Ressourcen: