Le potentiel artistique du son en mouvement

Les installations d'art interactif se développent sur la relation entre le public et l'environnement. Parmi les outils les plus puissants pour façonner cette relation, on peut citer le son et la mdash, en particulier la boucle de rétroaction audio en temps réel. Lorsqu'un microphone capte le bruit ambiant, le mouvement ou la parole, et que le signal est traité et rejoué par des haut-parleurs, l'espace lui-même devient un instrument.

Il faut comprendre le flux de signal, le traitement numérique des signaux (DSP), les contraintes matérielles et la façon d'ajuster la boucle pour qu'elle reste expressive sans s'enliser dans un bruit incontrôlable. Cet article passe par la conception et la mise en œuvre de boucles audio en temps réel pour l'art et la mdash interactifs, des concepts de base et de la sélection des composants à la programmation, aux techniques créatives et aux pratiques de sécurité.

Concepts fondamentaux de la rétroaction audio dans les espaces interactifs

Qu'est-ce qu'un boucle de rétroaction audio?

Une boucle de rétroaction audio se produit lorsqu'un signal de sortie est réorienté vers l'entrée du même système. Dans sa forme la plus simple, un microphone se nourrit dans un haut-parleur, et la sortie de haut-parleur et de la machine 8217;s est repris par le microphone. Le signal circule, s'appuyant sur lui-même.

Dans un contexte d'installation, la boucle n'est pas un bug à éviter, c'est le support central. L'artiste définit comment la boucle se comporte, quelles fréquences elle met en avant, comment elle réagit aux changements environnementaux et comment les téléspectateurs peuvent l'influencer par leur présence ou leurs actions.

Paramètres clés qui définissent la boucle

  • Structure des gains: Le volume du signal à chaque étape détermine si la boucle soutient, désintègre ou augmente en hurlement de la rétroaction.
  • Contenu de la fréquence & #160;: Les filtres éliminent ou boostent certaines fréquences, façonnent le caractère tonal et empêchent les pics dures.
  • Latence: Même quelques millisecondes de retard modifient la relation de phase du signal, modifiant de façon spectaculaire le modèle de rétroaction.
  • Aménagement spatial: Le placement physique des microphones et des haut-parleurs affecte les sons qui sont captés et la façon dont ils interagissent.
  • Non-linéarité: Le trempage, la saturation et d'autres processus non linéaires introduisent des harmoniques et une complexité qui rendent la boucle imprévisible et organique.

Fondations matérielles : Choisir les bons composants

Chaque composant introduit son propre plancher sonore, sa réponse à la fréquence et sa gamme dynamique. Construire une boucle de rétroaction fiable signifie correspondre à vos intentions artistiques tout en maintenant le chemin de signal propre et contrôlable.

Microphones

Pour les boucles de rétroaction, les microphones condenseurs sont courants car ils captent une large gamme de fréquences et répondent à des changements subtils dans l'environnement. Les microphones de contact (piézo-capteurs) fonctionnent bien lorsque vous voulez capturer des vibrations de surfaces plutôt que du son aérien.

Questions de placement: Un microphone placé près d'un haut-parleur créera une boucle plus agressive, tandis que celui placé plus loin ou orienté loin de l'enceinte produira une réponse plus douce et plus ambiante.

Intervenants

Les moniteurs de petite taille travaillent pour des installations intimes, tandis que les grands haut-parleurs PA remplissent un espace de galerie. Considérez le haut-parleur & #8217;s dispersion pattern— la dispersion étroite vous donne plus de contrôle sur l'endroit où le son va, tandis que la dispersion large remplit la pièce, mais rend la rétroaction plus difficile à localiser.

Interface audio et matériel de traitement

Une interface audio avec des pilotes à faible latence est essentielle. Cherchez des interfaces avec au moins deux entrées et deux sorties (une paire stéréo), bien que les interfaces multicanaux ouvrent des possibilités de spatialisation. L'interface convertit les signaux de microphone analogiques en données numériques que votre logiciel peut traiter, et convertit l'audio numérique traité en un signal analogique pour les haut-parleurs.

Pour l'appareil informatique, un ordinateur portable ou de bureau utilisant un environnement de programmation DAW ou visuelle est l'option la plus flexible. Pour les installations permanentes, un Raspberry Pi 4 ou 5 avec une interface audio USB peut exécuter des logiciels DSP légers comme Pure Data ou SuperCollider, offrant une solution compacte et de faible puissance.

Approches logicielles : de la programmation visuelle au code

Max/MSP et données pures

Dans Max/MSP, vous patchez des objets qui représentent des entrées audio, des sorties, des filtres, des oscillateurs et de la logique. Pure Data (Pd) est le frère open-source avec un paradigme similaire. Les deux vous donnent un contrôle précis sur chaque échantillon dans le flux audio.

Structure typique des correctifs de rétroaction:

  1. - les (convertisseur analogique à numérique) lit l'entrée du microphone.
  2. Une série de les objets de filtre (par exemple, C'est un peu comme ça., - La hanche, biquad~) façonner le contenu de la fréquence.
  3. Lignes de retard (derwrite~ / delread~) introduire des effets temporels.
  4. Gain d'objets contrôler le niveau et empêcher les retours d'information.
  5. DAC~ (convertisseur numérique à analogique) envoie le signal traité aux haut-parleurs.

Supercollider

SuperCollider est un langage de programmation basé sur le texte pour la synthèse audio. Il offre une flexibilité et des performances extrêmes, ce qui le rend adapté pour des installations complexes. LocalIn et Localité coupler les signaux à l'intérieur, combinés avec les UGN filtre (générateurs d'unités) et les enveloppes pour façonner la réponse.

Exemple de concept (pour illustration):

Cet extrait de la chaîne d'entrée 0 est lu, applique un filtre passe-bas contrôlé par la position de la souris, mélange le signal de rétroaction précédent avec un petit gain et écrit le résultat au bus de rétroaction interne.

Ableton Live et Max pour Live

Pour les artistes qui préfèrent un workflow DAW, Ableton Live combiné avec les appareils Max for Live fournit un environnement hybride. Vous pouvez construire des correctifs de rétroaction dans Max et les charger comme des appareils dans la vue de session de Live’s. Cette approche est idéale pour le prototypage rapide et pour les installations où vous voulez enregistrer ou déclencher des éléments supplémentaires à côté de la boucle de rétroaction.

Techniques créatives pour la formation des commentaires

Une fois la boucle de base lancée, la véritable arture commence. Les techniques suivantes vous donnent des façons de sculpter les retours en quelque chose d'expressif et de réactif.

Filtrage: Contrôle du centre de tonal

Un filtre passe-bas qui roule au-dessus, disons, 500 Hz crée un drone chaud et lourd de basses. Un filtre passe-haut qui atténue tout en dessous de 1 kHz produit une texture métallique fragile. Les filtres passe-bande isolent une région de fréquence étroite, qui peut créer une qualité chantante, presque vocale. Les paramètres du filtre balayant au fil du temps, manuellement ou avec un LFO, font évoluer organiquement les retours.

Retard : Générer des couches rythmiques et texturales

Les retards courts (moins de 100 ms) créent des effets de filtrage de peigne qui colorent le son. Les retards dans la gamme 200–500 ms produisent des échos distincts qui peuvent se superposer en motifs rythmiques. Les retards plus longs (secs multiples) créent des effets de boucle qui construisent des drones et des textures qui se chevauchent. Si le temps de retard est légèrement modulé, le pitch se penche de manière subtile, ajoutant du mouvement.

Modulation : Respirer le système

L'application de la modulation à n'importe quel paramètre de la chaîne empêche les retours de devenir statiques. Vous pouvez moduler la coupure du filtre avec une onde sinusoïdale lente, faire osciller le temps de retard avec une source aléatoire d'échantillonnage et de rétention, ou appliquer la modulation d'amplitude pour créer des effets de trémolo.

Traitement granulaire : Fragrissement du son

La synthèse granulaire divise l'audio en petits segments (grains) et les réassemble. Lorsqu'elle est appliquée à l'intérieur d'une boucle de rétroaction, le traitement granulaire crée des nuages sonores qui brillent et dérivent. Chaque grain capture un fragment du signal de rétroaction, et en variant la taille, la densité et le pas du grain, vous obtenez des textures qui vont des lavages éthérés au bruit dense et crépitant.

Spatialisation : Placer le son dans l'espace physique

Avec plusieurs haut-parleurs, vous pouvez diriger les retours vers différents endroits, créant un sens du mouvement. Panner lentement le signal entre les haut-parleurs fait le bruit errer dans l'espace. Dans une configuration quadrphonique ou octophonique, vous pouvez utiliser le panning d'amplitude (à base de vecteurs) ou des techniques plus avancées comme l'ambisonique. La spatialisation transforme l'espace d'installation lui-même en une toile pour les retours.

Interaction avec le spectateur : faire de l'audience une partie de la boucle

Les installations les plus engageantes permettent aux visiteurs d'influencer le son. Vous pouvez utiliser des capteurs tels que des capteurs de distance ultrasonore, des détecteurs de mouvement ou des systèmes de suivi à caméra (via OpenCV ou MediaPipe) pour cartographier la position du corps, le geste ou le mouvement vers des paramètres dans la chaîne de rétroaction. Par exemple, une personne et #8217; la distance d'un capteur contrôle la coupure du filtre et la mdash; le plus près, le plus lumineux le son. Ou une vague de la main augmente la rétroaction de retard, épaississant la texture.

Lorsque les téléspectateurs réalisent leurs actions façonnent le son, l'installation devient une collaboration entre l'humain et la machine.

Une démarche pratique : une sculpture sonore basée sur la rétroaction

Let’s passe par un projet concret pour voir comment ces pièces s'adaptent ensemble. Cet exemple utilise du matériel abordable et largement disponible et Pure Data, le rendant accessible pour le prototypage avant de s'étendre.

Objectif

Créez une sculpture sonore basée sur la rétroaction, où le mouvement des visiteurs influence le timbre et l'intensité de la boucle. L'installation utilise un microphone de contact attaché à une surface résonnante (une feuille de métal ou une boîte en bois), un haut-parleur placé face à la surface et un capteur de distance ultrasonique qui mesure la proximité de la personne la plus proche.

Liste des matériels

  • Raspberry Pi 4 (ou 5) avec carte SD, alimentation et boîtier
  • Interface audio USB (par exemple, Behringer U-Phoria UMC204HD)
  • Microphone de contact avec sortie 1/4 pouces ou XLR (p. ex. micro de style PZM ou piezo avec préampli)
  • Haut-parleur actif ou haut-parleur PA alimenté
  • Capteur de distance ultrasonore HC-SR04 (ou capteur de distance infrarouge pour un coût moindre)
  • Panneaux de pain, fils de saut et résistances pour le capteur
  • Câbles XLR et TS au besoin

Configuration du logiciel

  1. Installez Raspberry Pi OS Lite (sans bureau) et créez un réseau et un accès SSH.
  2. Installez Pure Data (pd) via apt: .
  3. Installer le Comportement bibliothèque externe: ou télécharger pour lire les données série du capteur.
  4. Créer un patch Pure Data avec la structure suivante:

Structure du lot:

  • [comportement] objet lit des valeurs de distance du capteur via USB série à 9600 baud.
  • Échellez la valeur de distance à une plage adaptée à la fréquence du filtre (p. ex. 200 Hz à 4000 Hz).
  • [ACNURANT 1] lit le microphone de contact depuis l'entrée 1 de l'interface audio.
  • Appliquer un filtre à passe-bande - C'est quoi, ça ? avec la fréquence à l'échelle.
  • Ajouter une ligne de retard [DELÈVE~] avec une durée de 300 ms et une rétroaction ajustée par une autre valeur à l'échelle du capteur.
  • Acheminer le signal traité vers [Dac~ 1 2] (sortie gauche et droite).
  • Ajouter un [Clip~] objet pour empêcher le clipping et un [ligne] pour faciliter les changements de paramètres.

Étalonnage et essais

  1. Réglez le haut-parleur à une distance modérée de la surface de résonance (début d'environ 30 cm).
  2. Commencez par le maître gagne faible (environ -20 dB) et la fréquence du filtre au milieu de sa gamme.
  3. Augmentez progressivement le gain jusqu'à ce que vous entendiez les commentaires commencer à sonner. Le système devrait produire un ton soutenu.
  4. Déplacez le capteur de distance près d'une surface plane qui peut refléter l'impulsion ultrasonore, et programmez-le pour déclencher un changement dans le filtre lorsqu'une personne est à portée.
  5. Testez avec une personne qui s'approche du capteur. Le filtre devrait balayer vers le haut à mesure qu'elle approche, ce qui rend les commentaires plus clairs et les laisser tomber à mesure qu'ils s'éloignent.

Cette structure simple donne aux visiteurs une réponse sonore claire et immédiate à leur mouvement. La feuille de métal ou la boîte en bois vibre avec sympathie avec l'enceinte, ajoutant une résonance physique qui change le caractère acoustique de manière subtile.

Sécurité et pratiques exemplaires pour les installations de rétroaction

La rétroaction non contrôlée peut produire des sons soudains et extrêmement forts qui endommagent l'ouïe et l'équipement.

Structure du gain et limitation

Utilisez un compresseur ou un limiteur sur la sortie maître. Réglez le seuil de sorte que le retour d'information ne dépasse jamais un niveau de pression acoustique sûr (généralement autour de 85–90 dB pour les espaces de galerie, bien que vérifier les règlements locaux). [Clip~] objet en Pd ou en Limiteur Dans Max pour faire glisser la sortie du disque dur. Ne jamais compter uniquement sur le logiciel limitant; un limiteur matériel entre la sortie de l'interface et l'enceinte ajoute une sécurité-failable.

Suivi du système

Pendant l'installation, surveiller le son en temps réel. Utilisez des écouteurs connectés à l'interface audio et à la sortie du casque pour entendre exactement ce que le logiciel envoie. Marchez dans l'espace pour vérifier les points chauds où les retours peuvent s'accumuler. Placez le microphone et l'enceinte de sorte que le chemin direct entre eux soit obstrué ou orienté pour minimiser le couplage.

Puissance et connectivité

Utilisez une gestion appropriée des câbles pour prévenir les risques de trébuchage et les déconnexions accidentelles. Étiquetez chaque câble aux deux extrémités. Utilisez un climatiseur ou une alimentation électrique non interruptible (UPS) pour l'appareil informatique et l'interface audio afin de prévenir les accidents lors d'une performance ou d'une exposition.

Considérations relatives à l'accessibilité

Les visiteurs ne répondront pas tous au son de la même façon. Fournissez des signaux visuels (DEL ou projections) qui correspondent aux commentaires audio, de sorte que les visiteurs sourds et durs d'audition puissent encore percevoir l'interaction. Gardez la pression sonore à un niveau qui ne provoque pas de gêne pour les personnes ayant des sensibilités auditives, et offrez un casque ou une zone tranquille à proximité.

Aller plus loin : Techniques et recherche avancées

Une fois que vous maîtrisez la boucle de rétroaction de base, il y a beaucoup de directions à explorer.

Rétroaction à long terme

En filtrant et en limitant soigneusement les retours, il est possible de créer des systèmes qui fonctionnent indéfiniment avec une dérive minimale. Ces installations deviennent des paysages sonores qui évoluent au fil des jours ou des semaines, se déplaçant subtilement au fur et à mesure que l'environnement change (température, humidité, bruit ambiant). Ryoji Ikeda explore souvent des retours minimes, mathématiquement précis qui suggèrent une durée infinie.

L'apprentissage automatique dans la boucle

Les réseaux neuraux peuvent classer l'état de la rétroaction et ajuster les paramètres intelligemment. Par exemple, un petit réseau neural formé sur spectrogrammes pourrait reconnaître lorsque la rétroaction devient trop dure et réduit automatiquement le gain ou le déplacement d'un filtre. Cette approche, parfois appelée contrôle de la rétroaction perceptuelle, maintient le système dans une plage souhaitable sans intervention manuelle.

Commentaires multicanaux et ambassiens

Avec plusieurs microphones et haut-parleurs, la rétroaction devient un instrument spatial. Chaque microphone prend un mélange différent de son direct et réfléchi, et le logiciel peut acheminer et balayer ces signaux pour créer des champs sonores complexes et tourbillonnants. Ambisoniques fournit un cadre mathématique pour l'encodage et le décodage du son 3D, permettant de placer des signaux de rétroaction n'importe où dans la sphère autour de l'auditeur.

Modélisation physique et résonance

Au lieu d'utiliser la résonance physique réelle d'une pièce, vous pouvez simuler des corps résonnants dans le logiciel. Une banque de filtres de passe-bande accordé aux modes d'un violon ou d'une plaque métallique crée une résonance synthétique qui répond à l'entrée. Lorsque la rétroaction est acheminée à travers ces résonateurs simulés, le son prend le caractère de l'objet virtuel. Céson et FOI offrir des outils puissants pour concevoir ces résonateurs numériques.

Conclusion

Les boucles audio en temps réel sont l'un des outils les plus directs et les plus puissants pour créer des installations sonores interactives. Le retour d'information lui-même est un système vivant et respirant qui répond à chaque changement d'environnement et à chaque geste du public.

Les meilleures installations de rétroaction équilibrent le contrôle avec surprise. Elles donnent au public assez d'influence pour se sentir agence, mais le système contient assez de mystère pour les garder à explorer. Commencez par une simple boucle, écoutez attentivement, et laissez les rétroactions vous enseigner ce qu'il veut devenir.

Ressources supplémentaires :