Procedural Audio in Sound Art Installations: Techniques and Inspirations
Table of Contents
Qu'est-ce que l'audio procédural?
L'audio procédural est une technique qui génère le son en temps réel en utilisant des algorithmes, des fonctions mathématiques ou des systèmes fondés sur des règles, plutôt que de lire des fichiers audio préenregistrés. Le terme a d'abord gagné en traction dans l'industrie du jeu vidéo, où les bandes sonores interactives nécessaires pour s'adapter aux actions imprévisibles du joueur. Données pures (Pd) et WWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWWW Dans le contexte des installations d'art sonore, l'audio procédural permet aux artistes d'intégrer la réactivité, l'imprévisibilité et un sens de la vie dans leur travail, ce qui brouille souvent la ligne entre la composition et la performance.
Les principales caractéristiques de l'audio procédural sont les suivantes :
- Non-répétition: Chaque expérience d'écoute peut être unique car le son est généré à la volée, jamais exactement la même deux fois.
- Interactivité: Les entrées externes – capteurs, flux de données, mouvement du public – influencent directement la sortie en temps réel.
- Échelle: Le même algorithme peut produire des résultats très différents selon les paramètres, ce qui facilite l'adaptation des installations aux nouveaux espaces ou contextes.
- Contrôle en temps réel: Les artistes peuvent ajuster les variables pendant une performance ou une exposition sans arrêter le système, ce qui permet une improvisation en direct.
Cette approche contraste avec la composition traditionnelle des médias fixes, où chaque événement sonore est prédéterminé et enregistré. émergence—l'idée que des modèles complexes et surprenants peuvent découler de règles simples — et invite le public à jouer un rôle de cocréateur. L'auditeur devient un participant dont la présence façonne le paysage sonore de manière subtile ou dramatique.
Techniques de l'art procédural sain
Les artistes utilisent une large gamme de techniques pour mettre en œuvre l'audio procédural. Chaque méthode offre des possibilités esthétiques uniques et des défis techniques. Les sous-sections suivantes détaillent les approches les plus courantes et les plus pertinentes, ainsi que la façon dont elles peuvent être appliquées dans les contextes d'installation.
Synthèse granulaire
La synthèse granulaire se décompose en fragments minuscules appelés grains, généralement de 1 à 100 millisecondes de longueur, et les recombine de diverses façons. En contrôlant la densité des grains, le pas, la durée, la position spatiale et la forme de l'enveloppe, les artistes peuvent créer des nuages de son, des drones en évolution ou des textures percussives qui se transforment en continu. Dans les installations, la synthèse granulaire est souvent utilisée pour générer des paysages sonores ambiants qui se sentent organiques et imprévisibles.
Les outils populaires pour la synthèse granulaire comprennent: Max/MSP, Supercollider, et des plugins dédiés comme Granulateur II Pour Ableton Live. La technique est bien adaptée aux installations car elle peut fonctionner en continu avec un minimum de CPU en tête, et les paramètres peuvent être cartographiés à n'importe quel entrée de capteur – lumière, température, pression, ou même champs électromagnétiques. Céson pour sa flexibilité dans la conception d'algorithmes granulaires personnalisés.
Composition algorithmique
La composition algorithmique utilise des règles prédéfinies, souvent inspirées par les mathématiques, les probabilités ou la géométrie fractale, pour générer des structures musicales (mélodies, rythmes, harmonies) en temps réel. Chaînes Markov, où la probabilité de la prochaine note ou événement dépend de l'état actuel, créant de la musique qui se sent à la fois structurée et fraîche. Systèmes L, développé à l'origine pour la modélisation de la croissance des plantes, qui peut générer des modèles mélodiques ramifiés rappelant les formes naturelles. Automates cellulaires, comme le jeu de vie de Conway, peuvent également conduire à l'évolution rythmique ou texturale.
Des exemples d'installation notables incluent Brian Eno , 77 millions de peintures Plus récemment, les artistes ont intégré des modèles d'apprentissage automatique pour produire des compositions algorithmiques qui apprennent des réactions du public ou des données environnementales. Dans une installation physique, l'algorithme pourrait être guidé par une caméra traquant les mouvements des visiteurs, ce qui rendrait la musique plus complexe à mesure que plus de gens entrent dans l'espace, ou pour déplacer la tonalité en fonction de la vitesse moyenne du mouvement.
Modélisation physique
La modélisation physique simule le comportement acoustique des objets physiques – cordes, membranes, tubes, pièces – en utilisant des équations mathématiques dérivées de la physique. Au lieu de jouer un enregistrement d'une note de piano, un modèle physique simule le marteau frappant la corde, la vibration qui traverse la table de son et l'onde de pression qui en résulte dans l'air. Cette approche permet un son très réaliste et expressif, mais ouvre aussi la porte à des instruments impossibles : un violon à corde de mètre de long, un tambour en liquide ou une pièce qui change de forme en réponse au son. La modélisation physique peut aussi simuler l'acoustique environnementale, comme la réverbération d'une cathédrale ou l'absorption d'une forêt.
Dans l'art de l'installation, la modélisation physique peut être utilisée pour créer des environnements immersifs où l'espace lui-même se sent vivant. Marina Rosenfeld a utilisé des modèles physiques d'espaces acoustiques pour générer du son qui change au fur et à mesure que les visiteurs passent, faisant de chaque personne une partie de l'acoustique. Modalys logiciels et Céson offrir des capacités de modélisation physique profonde, tandis que des paquets commerciaux comme La Communauté européenne inclure des modèles simplifiés accessibles à un plus large éventail de créateurs. Certains artistes construisent leurs propres modèles en utilisant Données pures ou Supercollider pour atteindre des textures spécifiques et autres.
Intégration des intrants environnementaux
Un des aspects les plus convaincants de l'audio procédural dans les installations est la capacité de relier la production sonore directement à l'environnement. Les capteurs pour la lumière, la température, l'humidité, la pression atmosphérique, le mouvement, et même les champs électromagnétiques peuvent alimenter les données dans un moteur sonore, ce qui fait que l'audio se déplace avec le microclimat de la pièce. Par exemple, une installation peut utiliser une API météorologique pour générer un paysage sonore qui reflète les conditions actuelles à l'extérieur – devenant plus turbulent pendant une tempête ou un calme par jour ensoleillé.
En outre, vision de l'ordinateur les systèmes peuvent suivre la position, la vitesse, la direction et même la posture des visiteurs, en les maillant en paramètres audio tels que le panoramique, le volume et le tangage. Cela crée une connexion directe et incarnée entre le public et le son, transformant la galerie en un instrument massif et invisible. Traitement ou openFrameworks combiné avec des moteurs audio comme de sons ou C'est moi qui ai fait ça. pour l'analyse et la synthèse en temps réel. Arduino ou Riz de canneberge Avec des capteurs personnalisés, les systèmes d'entrée sont peu coûteux et très personnalisés.
Systèmes de particules à base de physique
Une autre technique émergente consiste à utiliser des simulations physiques pour générer du son. Les particules se déplaçant dans un champ gravitationnel simulé, en collision avec des frontières, ou affectées par le vent et la friction peuvent produire un son rythmique ou textural lorsque leurs positions, vitesses ou collisions sont cartographiées en fonction des paramètres de synthèse. Dans une installation, le système de particules peut être projeté visuellement tout en générant simultanément un son, créant une expérience audiovisuelle unifiée.
Inspirations et exemples
L'audio procédural dans l'art sonore a été façonné par des pionniers de la musique informatique, de l'art génératif et de la composition expérimentale. Les artistes et œuvres suivants démontrent la portée et la puissance de ces techniques, allant de la sonification minimaliste des données aux paysages sonores mécaniques chaotiques.
Ryoji Ikeda
Le travail de Ryoji Ikeda explore la relation entre les données et la perception à travers un son et des visuels minimalistes et haute résolution. data.tron (2006) utilise des algorithmes procéduraux pour convertir des flux de données brutes en motifs sonores et visuels intenses et pulsants. Le son est généré par des ondes sinusoïdales pures, des ondes carrées et du bruit, disposés en séquences mathématiquement précises qui semblent repousser les limites de l'ouïe humaine. L'approche d'Ikeda est profondément procédurale : chaque élément est généré par le code, sans matériel pré-enregistré. Son travail démontre comment l'audio procédural peut créer une expérience viscérale, presque physique – le son semble occuper l'espace lui-même. Explorez les installations de Ryoji Ikeda- Oui.
Brian Eno
Brian Eno est souvent crédité de la pièce de monnaie du terme -"musique générative"—un cousin proche de l'audio procédural. Musique discrète et les installations ultérieures, telles que Musique pour les aéroports système au Marine Air Terminal à New York, utiliser des boucles de bande et des algorithmes de retard simples pour créer de la musique qui évolue lentement au fil du temps. Bloom iPhone app (2008), permet aux utilisateurs de générer des mélodies infinies et ambiantes en touchant l'écran. Cette idée de -music qui se fait - est centrale à l'audio procédural dans l'installation: l'artiste fixe les règles, et la pièce se déroule indépendamment. En savoir plus sur les systèmes génériques Brian Eno ès- Oui.
Cecilia Bengtsson
Cecilia Bengtsson crée des installations immersive où le son est généré par le mouvement du public. Échos du corps, un système de capteurs ultrasoniques détecte la proximité et les gestes des spectateurs, déclenchant la synthèse granulaire et des modèles physiques qui imitent la résonance du corps humain. expérience incarnée de son : l'installation devient un instrument réactif que chaque visiteur joue de façon unique. Bengtsson utilise souvent Données pures avec sur mesure Arduino des réseaux de capteurs pour obtenir un son très réactif, et son travail a été exposé à l'échelle internationale dans des galeries et des espaces publics.
Autres artistes et œuvres
- Christina Kubisch – Connu pour les installations d'induction électromagnétique, où les visiteurs portent des écouteurs spéciaux pour entendre les sons cachés des champs électriques. Bien que non purement procédurale, son travail implique souvent la transformation en direct des données environnementales en audio, rendant l'audible invisible.
- Zimoun – Construit des sculptures sonores mécaniques à grande échelle à l'aide de moteurs à courant continu, de ventilateurs et de fils. Le son est généré par les interactions chaotiques de centaines d'unités identiques, produisant des motifs émergents complexes à la fois visuels et auditifs.
- Holly Herndon – Explore l'audio procédural piloté par l'IA dans des œuvres comme PROTO (2019), où un réseau neuronal formé sur des voix humaines génère des textures chorales qui répondent à des entrées vivantes. Son travail repousse les limites de l'apprentissage automatique en tant qu'outil créatif dans l'art sonore.
- Markus Schmidt – Utilise des données biologiques (fréquence cardiaque, ondes cérébrales) pour contrôler la synthèse sonore procédurale, reliant les rythmes internes du corps à l'environnement externe de l'installation. Cela crée une expérience introspective profondément personnelle pour chaque participant.
- Robertina Šebjanič – Fonctionne avec des environnements sonores sous-marins, utilisant des hydrophones et des sons de procédure pour sonder la santé des écosystèmes aquatiques. Ses installations génèrent souvent des paysages sonores qui changent en temps réel sur la base de données de capteur de qualité de l'eau.
Défis et considérations
Si l'audio procédural offre un immense potentiel créatif, il présente également des défis uniques pour les artistes sonores. Prédictibilité par rapport à la surpriseSi l'algorithme est trop aléatoire, l'expérience peut se sentir chaotique ou sans sens; si trop rigide, elle perd son caractère dynamique. Les artistes doivent bien régler les plages de paramètres, utiliser des contraintes et parfois recouvrir des éléments procéduraux avec du matériel fixe pour atteindre un équilibre satisfaisant.
Un autre défi est fiabilité technique. Les installations fonctionnent souvent pendant des heures ou des jours, et tout accident de logiciel ou défaillance matérielle peut perturber l'expérience. Les artistes doivent concevoir des systèmes avec des sécurités de panne, tels que les sons de recul, les chiens de garde et les architectures modulaires qui permettent à des parties du système de continuer à fonctionner si d'autres échouent. La documentation et le recalibrage facile sont également essentiels, surtout si l'installation est prêtée à d'autres sites.
Enfin, perception de l'auditoire Les visiteurs ne reconnaissent pas immédiatement que le son y répond. Des signaux visuels clairs, des retours haptiques subtils ou des panneaux peuvent aider à combler l'écart. Certains artistes affichent explicitement le processus générateur (par exemple, afficher des données de code ou de capteur sur les écrans) pour faire de la nature procédurale une partie de l'œuvre. D'autres conçoivent des interfaces qui invitent à l'interaction directe, comme des claviers tactiles ou des microphones, afin que le public prenne conscience de leur influence sur le monde sonore.
Orientations futures
L'avenir de l'audio procédural dans l'art sonore est étroitement lié aux progrès de l'apprentissage automatique, de l'audio spatial et du matériel accessible.
Apprentissage automatique et AI
Les réseaux neuronaux sont de plus en plus utilisés pour générer et transformer le son en temps réel. Magenta (Google , musique libre AI) et DAUCHE (Differententiable Audio Synthesis) permet aux artistes de former des modèles sur des corps sonores spécifiques et de les utiliser comme moteurs générateurs. Une installation peut, par exemple, apprendre les caractéristiques acoustiques d'une pièce particulière sur plusieurs jours et générer des sons parfaitement adaptés à sa réverbération. contexte-contexte audio qui peut s'adapter à des changements subtils dans le comportement du public, tels que les niveaux d'attention ou les états émotionnels déduits des expressions faciales. Cependant, les artistes doivent être conscients des implications éthiques de l'utilisation de l'IA, y compris la confidentialité des données et le potentiel de la formation biaisée ensembles de données.
Sonorisation et ambassitude spatiale
L'audio procédural est de plus en plus associé à des techniques sonores spatiales, telles que l'ambisonique ou le rendu binaural à ordre supérieur. Cela permet au son de se déplacer dans un espace tridimensionnel, suivant les visiteurs en marchant ou en créant des événements sonores localisés. Les installations futures peuvent utiliser des algorithmes procéduraux pour générer des objets sonores spatiaux - - qui existent à des coordonnées spécifiques dans une installation, répondant à l'emplacement de chaque membre du public individuellement par synthèse de champ d'onde. En savoir plus sur la technologie ambisonique- Oui.
Outils et plateformes accessibles
Comme un logiciel Sac VCV, Synth sur mesure, et des outils basés sur le Web (p. ex. Tone.js, API Audio WebLes artistes sans fond de programmation profond peuvent maintenant construire des systèmes génériques complexes utilisant des patchs visuels ou des codes de blocs. Cette démocratisation entraînera probablement une explosion d'art sonore procédural dans les galeries, les espaces publics et même les plateformes en ligne. Explorer Tone.js pour l'audio procédural en ligne- Oui.
Intégration avec Internet des objets (IdO)
Une installation pourrait utiliser le flux de trafic, les données météorologiques, l'activité des médias sociaux, ou même les fluctuations du marché financier pour conduire à la production de son en temps réel. la sonification des données comme forme d'art, où les motifs invisibles dans le monde deviennent audibles et accessibles. Par exemple, une installation sur une place publique pourrait sonner le mouvement piétonnier tout au long de la journée, faisant de la ville une composition sonore vivante qui évolue avec la navette quotidienne.
Conclusion
L'audio procédural est passé d'une curiosité technique de niche à un outil fondamental pour les artistes sonores qui veulent créer des environnements vivants et réactifs. En maîtrisant des techniques comme la synthèse granulaire, la composition algorithmique, la modélisation physique, les systèmes de particules à base physique et l'intégration des entrées environnementales, les artistes peuvent artisanatr des installations qui se sentent aussi dynamiques et imprévisibles que le monde naturel. L'œuvre de pionniers comme Ryoji Ikeda, Brian Eno, Cecilia Bengtsson, et bien d'autres montre comment l'audio procédural peut évoquer des réponses émotionnelles et intellectuelles profondes, transformant l'écoute passive en participation active.