Field Recording and Soundscapes
The Science of Sound Localization and Its Application in Binaural Recording Techniques
Table of Contents
La physiologie et la psychoacoustique de la localisation saine
Le système auditif humain a développé une capacité extraordinaire d'extraction de l'information spatiale des signaux acoustiques. Comprendre les mécanismes physiologiques et psychoacoustiques derrière la localisation sonore est essentiel pour les ingénieurs, les producteurs audio et les chercheurs travaillant avec l'audio spatial. Le cerveau intègre plusieurs indices pour construire une scène auditive tridimensionnelle cohérente, en s'appuyant à la fois sur des différences binaurales et le filtrage spectral monaural. Ces indices sont traités à travers une hiérarchie de structures neurales, du complexe olivaraire supérieur dans le tronc cérébral au cortex auditif, où la perception spatiale est affinée et intégrée avec d'autres modalités sensorielles.
Différence de temps interurbain (DCI)
Lorsqu'un son provient d'un endroit non directement devant l'auditeur, il arrive aux deux oreilles à des moments légèrement différents. Cette différence de temps interaural peut être aussi petite que quelques microsecondes, mais le système auditif humain peut détecter des DTI jusqu'à environ 10 microsecondes dans des conditions idéales. L'olive supérieure médiane du tronc cérébral contient des neurones qui agissent comme détecteurs de coïncidence, tirant de préférence lorsque les signaux des deux oreilles arrivent dans une fenêtre de temps spécifique. ITD est le plus efficace pour localiser les sons à basse fréquence en dessous d'environ 1,5 kHz, où la longueur d'onde est plus longue que le diamètre de la tête, permettant aux ondes sonores de se diffracter autour de la tête sans atténuation significative.
Différence de niveau interaural (DCI)
Cette différence de niveau interaural devient significative au-dessus d'environ 2–3 kHz, où les longueurs d'onde sont plus courtes que les dimensions de la tête. L'olive latérale supérieure dans le tronc cérébral compare l'intensité des signaux des deux oreilles pour calculer l'azimut probable de la source sonore. Les signaux de l'ILD peuvent dépasser 20 dB pour les sons arrivant du côté à de hautes fréquences, fournissant des informations directionnelles robustes. La théorie duplex de localisation sonore, proposée par Lord Rayleigh en 1907, pose que l'ITD domine pour les basses fréquences et l'ILD domine pour les hautes fréquences, le système auditif combinant les deux signaux à travers le spectre de fréquences pour une localisation précise dans le plan horizontal.
La fonction de transfert liée au chef (FRH)
La fonction de transfert de la tête, de la tête et du torse introduit un filtrage spectral dépendant de la direction qui code l'élévation et l'information de l'avant. Ce filtrage est mathématiquement caractérisé par la fonction de transfert de la tête, qui décrit comment le son est modifié par l'anatomie de l'auditeur avant d'atteindre le tympan. Le HRTF introduit des encoches et pics spectraux caractéristiques qui varient selon la direction du son, en particulier dans la gamme de 4 à 16 kHz, où les réflexions de la pinna créent des motifs d'annulation qui fournissent des repères d'élévation. Le HRTF de chaque individu est unique en raison de variations de la forme de l'oreille, des dimensions de la tête et de la géométrie du torse.
L'effet de la préséance et la suppression de l'écho
Dans les environnements réels, les auditeurs entendent un mélange de sons directs et de réflexions provenant de surfaces telles que les murs, les planchers et les objets. Malgré cette scène acoustique complexe, le système auditif localise généralement le son en fonction du premier front d'onde, supprimant les réflexions ultérieures à des fins de localisation. Ce phénomène est connu comme l'effet de préséance ou effet de Haase. Pour que l'effet de préséance fonctionne, le retard entre le son direct et la première réflexion doit être inférieur à 1 milliseconde environ pour la fusion complète, avec la localisation directe du son dominant même à des délais allant jusqu'à 30-40 millisecondes. Comprendre ce mécanisme est critique pour l'enregistrement et la reproduction binaugiques : si les réflexions précoces sont capturées ou synthétisées avec un timing incorrect par rapport au son direct, l'auditeur peut percevoir l'image comme diffuse ou mal localisée.
Cues de localisation dynamique et mouvements de tête
Les signaux statiques fournissent des informations spatiales importantes, mais les mouvements de tête jouent un rôle crucial dans la résolution des ambiguïtés. Lorsqu'un auditeur tourne la tête, les angles relatifs des sources sonores changent, fournissant des indices dynamiques qui aident à distinguer l'avant de la perception de l'altitude et à affiner celle-ci. Le système auditif intègre des rétroactions vestibulaires et proprioceptives avec des signaux auditifs pour maintenir un monde perceptuel stable. Dans l'enregistrement et la reproduction binauraux, la technologie de suivi de tête peut mettre à jour l'audio rendu en temps réel, améliorant considérablement le sens de l'externalisation et de l'immersion.
De l'audition naturelle à l'enregistrement binaurique
En plaçant des microphones à ou près des positions du tympan d'un auditeur ou d'une tête artificielle, l'enregistrement préserve les repères de la DTI, de l'ILD et du HRTF qui se produiraient naturellement à cet endroit. Lorsqu'ils sont rejoués sur un casque, ces enregistrements recréent la scène spatiale originale avec une fidélité remarquable, permettant à l'auditeur de percevoir des sons provenant de lieux spécifiques dans un espace tridimensionnel, y compris l'élévation, la distance et le mouvement.
La technique du microphone tête de Dummy
La méthode la plus directe d'enregistrement binaural utilise une tête de mannequin équipée de microphones dans les canaux auditifs. Les têtes de mannequins commerciaux comme les Neumann KU 100, Bruel & Kjaer HATS et Cortex Manikin présentent des formes anatomiquement précises de pinnae, de canaux auditifs et de torse. Ces mannequins sont conçus pour correspondre aux propriétés acoustiques d'une tête humaine moyenne, fournissant un HRTF générique qui fonctionne raisonnablement bien pour de nombreux auditeurs. Les microphones sont généralement placés à la position du tympan ou à l'entrée du canal auditif, capturant le filtrage spectral complet de la tête et de la tête.
Microphones en eau béninale
Pour les enregistrements sur le terrain et les applications en direct, des microphones omnidirectionnels miniatures peuvent être placés directement dans les canaux auditifs d'un auditeur humain. Ces microphones binauraux in-auriculaires, tels que le Sennheiser KE 4-211-2 ou des appareils sur mesure, sont portés comme des moniteurs intra-auriculaires et capturent le propre HRTF de l'auditeur. Cette approche présente plusieurs avantages : le HRTF est parfaitement adapté à l'auditeur, l'enregistrement inclut l'acoustique naturelle du canal auditif, et l'auditeur peut se déplacer librement pendant l'enregistrement.
Synthèse binaurale et son surround virtuel
Les signaux binauraux peuvent également être synthétisés à partir de systèmes audio multicanaux ou à base d'objets à l'aide de bases de données HRTF et de convolution en temps réel. Cette approche est largement utilisée dans les moteurs audio de jeux, les plateformes de réalité virtuelle et les systèmes de virtualisation sonore surround. Par exemple, un mix 5.1 peut être transformé en un flux d'écoute binaural en appliquant des filtres HRTF à chaque canal et en additionnant les résultats.
Binaural vs. Stéréo et alentour : différences critiques
Les enregistrements stéréo standard – tels que les paires d'oreilles espacées, ORTF et X/Y – captent un sens de largeur et de distribution spatiale, mais ne préservent pas l'ensemble complet des repères de localisation utilisés par le système auditif humain. Les enregistrements stéréo reposent sur des différences d'amplitude et de temps entre les deux canaux, qui sont interprétées par le cerveau comme des repères directionnels principalement lorsqu'ils sont joués sur haut-parleurs. Cependant, la lecture des haut-parleurs introduit des crosstalks : chaque oreille entend les deux haut-parleurs, une précision spatiale dégradante et crée une image du centre fantôme qui dépend fortement de la position d'écoute.
Applications pratiques de l'enregistrement binaulique
L'audio binaurique est passé de la curiosité du laboratoire à un outil pratique dans de nombreuses industries. Ci-dessous sont quelques-unes des applications les plus importantes aujourd'hui, avec une attention à la mise en œuvre technique et des cas d'utilisation réelle.
La réalité virtuelle et augmentée
Dans la réalité virtuelle et la réalité augmentée, l'audio spatial est essentiel pour créer un sens convaincant de la présence. Le rendu binaural permet aux objets virtuels d'avoir des emplacements spatiaux distincts, permettant aux utilisateurs de s'orienter et de réagir aux événements basés sur le son seul. Les plateformes VR telles que Oculus Quest, HTC Vive et PlayStation VR supportent tous les rendus binaural accélérés par le matériel en utilisant les fonctions de transfert liées à la tête. L'API WebAudio comprend désormais des interfaces intégrées et qui supportent le rendu binaural pour les expériences VR basées sur le Web. Un pipeline audio VR typique consiste à positionner des sources sonores dans l'espace 3D, à appliquer une atténuation basée sur la distance, un déplacement Doppler et une acoustique de pièce, puis à combiner les signaux avec une réponse binaural par impulsion (BRIR) capturée d'une tête factice dans l'espace virtuel.
Production musicale et enregistrement de performances en direct
L'enregistrement binaural a trouvé un suivi dédié dans la production musicale, en particulier pour les genres qui bénéficient de l'intimité et du réalisme spatial. L'enregistrement musical classique utilise souvent des techniques binaurales pour capturer l'acoustique naturelle des salles de concert, permettant aux auditeurs de casques d'expérimenter la signature acoustique unique de la salle. Les performances jazz et acoustiques enregistrées avec des têtes factices peuvent transmettre l'arrangement spatial des musiciens avec une clarté impressionnante. Les enregistrements binauraux commerciaux notables comprennent des albums de la Philharmonique de Berlin, des œuvres expérimentales d'artistes tels que Eivind Aarset et Craig Leon, et toute la série "Binaural" de la label allemande Edition Wandelweiser. Pour les performances live, les microphones binauraux peuvent être placés à la position d'écoute idéale, capter les réactions du public et les réflexions de salle aux côtés de la performance.
Jeux et audio interactif
Les jeux vidéo modernes comptent de plus en plus sur l'audio binaural pour améliorer la sensibilisation à l'immersion et au gameplay. Les jeux de tir de première personne utilisent l'audio spatial pour localiser les pas ennemis, les tirs de canon et le dialogue, donnant aux joueurs des informations directionnelles critiques. Le jeu Hellblade: Sacrifice de Senua est un exemple marquant, utilisant l'enregistrement binaural des acteurs de la voix et des sons environnementaux pour créer une expérience auditive intense et désorientante qui reflète la psychose du protagoniste.
Recherche auditive et sciences auditives
Les enregistrements binauraux sont des outils indispensables en psychoacoustique et en audiologie. Les chercheurs utilisent des enregistrements de têtes factices pour créer des stimuli d'essai contrôlés et répétables pour étudier la localisation sonore, la perception de la parole dans le bruit et les troubles auditifs spatiaux. En rejouant des enregistrements binauraux à des sujets par le biais d'écouteurs, les expérimentateurs peuvent précisément contrôler les signaux acoustiques présentés à chaque oreille, isoler les effets de variables spécifiques.Dans le développement des appareils auditifs, les enregistrements binauraux des environnements quotidiens – restaurants, circulation, salles de classe – sont utilisés pour évaluer les performances des algorithmes et générer des scénarios d'essai réalistes.
Production cinématographique, télévisuelle et baladodiffusion
Les plateformes de streaming comme Netflix et YouTube supportent les pistes audio binaurales, et certaines productions créent des mixes binaurales dédiées aux téléspectateurs. Dans le podcasting, l'enregistrement binaural a été adopté pour les segments de documentaire immersif, les dramatiques sonores de fiction et le contenu ASMR. Le podcast populaire « The Truth » a utilisé des techniques binaurales pour créer des scènes réalistes et émotionnellement engageantes. Pour l'enregistrement sur le terrain, les microphones binauraux capturent le paysage sonore ambiant avec une impression spatiale naturelle, les rendant populaires pour la conception sonore et les enregistrements d'archives de l'audio environnementale. La BBC, NPR, et d'autres radiodiffuseurs ont expérimenté avec le contenu binaural pour les dramatiques radio et les documentaires, en trouvant que la technique améliore l'engagement de l'auditeur et la résonance émotionnelle.
Défis et limites de l'audio binaulique
Malgré sa puissance, l'enregistrement binaural comporte plusieurs limites que les praticiens doivent comprendre pour l'utiliser efficacement.Ces défis couvrent la reproduction technique, la variabilité individuelle et les contraintes de distribution.
Dépendance des écouteurs et alimentation croisée
Les enregistrements binauraux sont fondamentalement conçus pour la lecture du casque. Lorsqu'ils sont joués par des haut-parleurs, les signaux spatiaux prévus sont corrompus par des crosstalks : chaque oreille entend les deux haut-parleurs, mélangeant les canaux gauche et droit. Cela détruit les relations ITD et ILD et entraîne généralement une scène sonore étroite, terne ou irréaliste. Le traitement audio transaural peut annuler les crosstalks par des haut-parleurs soigneusement positionnés et des filtrages spécialisés, mais cette approche est très sensible à la position d'écoute et à la géométrie de la tête de l'auditeur.
Variations individuelles dans le cadre du FASS
Les études ont montré que la précision de localisation avec des HRTF génériques varie considérablement d'un auditoire à l'autre, avec des erreurs courantes, y compris la confusion frontale, une erreur de jugement de l'élévation et l'internalisation des sons qui devraient apparaître externes. Pour certains auditeurs, un HRTF générique fournit une expérience convaincante; pour d'autres, le même enregistrement peut sembler creux, progressif ou mal localisé. Les solutions comprennent la mesure personnalisée du HRTF à l'aide de méthodes acoustiques ou de balayages d'oreilles 3D, des modèles statistiques qui sélectionnent le HRTF le mieux adapté à une base de données et des algorithmes d'apprentissage automatique qui prédisent le HRTF à partir d'images d'oreilles.
Internalisation et externalisation
Une plainte fréquente parmi les auditeurs d'enregistrement binaural est que les sons semblent provenir de la tête, phénomène connu sous le nom d'internalisation ou de localisation intracrânienne.Cela se produit lorsque les signaux auditifs ne correspondent pas aux attentes de l'auditeur pour les sources sonores externes, souvent en raison d'un FASS ou d'une acoustique insuffisante de la pièce. L'extériorisation – la perception que les sons se trouvent à l'extérieur de la tête – est améliorée en incluant une réverbération appropriée, des réflexions précoces et des mouvements de la tête.
Compatibilité de la distribution et du format
Il n'existe pas de format universel de fichiers ou de métadonnées pour le contenu binaural, ce qui signifie que les auditeurs doivent souvent compter sur des applications ou du matériel spécifiques pour pouvoir faire l'expérience d'enregistrements binaural correctement. Les plateformes comme YouTube supportent l'audio binaural dans le cadre de leurs offres audio spatiales, mais l'implémentation varie, et de nombreux services de streaming compressent le contenu binaural avec des codecs perdus qui peuvent dégrader les repères spatiaux. Pour les créateurs, la distribution de contenu binaural nécessite un étiquetage clair et une éducation des utilisateurs pour s'assurer que les auditeurs comprennent le besoin de casques. L'absence d'une norme largement adoptée pour l'échange binaural a limité son adoption dans la distribution de musique commerciale, bien que la montée en puissance des formats audio immersifs comme Dolby Atmos – qui peut être rendu binaural – contribue à combler cette lacune.
Complexité technique et coût
L'enregistrement binaural de haute qualité nécessite un équipement spécialisé, des têtes de dummy ou des microphones intra-auriculaires, qui peut être beaucoup plus coûteux que les microphones stéréo standard. Le Neumann KU 100, par exemple, coûte plus de 8 000 $. Pour la synthèse, les bases de données HRTF et les moteurs de convolution en temps réel ajoutent des frais généraux qui ne sont pas pratiques pour toutes les applications. De plus, créer un contenu binaural convaincant nécessite souvent un calibrage minutieux, une modélisation acoustique de locaux et un traitement post-production pour obtenir des résultats naturels.
Orientations futures en technologie binaurique
Les progrès de la génération HRTF personnalisée sont en passe de devenir plus accessibles grâce à la numérisation des oreilles par smartphone et au traitement en nuage. Des systèmes commerciaux comme l'ID Génélect Aural et le Dirac 3D Audio Studio offrent déjà des solutions HRTF personnalisées pour les utilisateurs professionnels. Le rendu binaural en temps réel avec simulation acoustique en salle complète est désormais possible sur le matériel VR de consommation, y compris des casques autonomes sans attaches PC. L'intégration du rendu binaural avec des métadonnées audio spatiales à partir de formats audio d'objets promet des paysages sonores plus flexibles et adaptés.
Conclusion
La science de la localisation sonore fournit la base théorique de l'enregistrement binaural, technique qui recrée les repères acoustiques utilisés par le système auditif humain pour percevoir l'espace. En captant les différences interaurales de temps, les différences de niveau et le filtrage spectral dépendant de la direction de la tête et des oreilles, les enregistrements binaural peuvent reproduire une scène auditive tridimensionnelle convaincante lorsqu'ils sont écoutés sur des écouteurs. Les applications couvrent la réalité virtuelle et augmentée, la production musicale, le jeu, le film, la baladodiffusion, les sciences auditives et la recherche acoustique.
Pour plus de détails, veuillez consulter le rapport d'ensemble de solides mécanismes de localisation des Instituts nationaux de la santé, les ressources techniques pour le microphone à tête factice Neumann KU 100et les Documentation Oculus Audio SDK Pour ceux qui s'intéressent à la personnalisation du FASS, le document de recherche "Identification des fonctions de transfert liées à la tête pour la synthèse binaudale" fournit une référence technique faisant autorité. Entrée Wikipédia sur l'enregistrement binaural La Commission a également proposé un point de départ solide pour une exploration plus approfondie. Page technologique Dolby Atmos détails comment l'audio basé sur des objets peut être rendu binaurallement pour les auditeurs du casque.