Foley Placement for 3d Audio: Techniques for Spatial Accuracy
Table of Contents
Comprendre Foley en 3D Audio
Foley est l'art de recréer les effets sonores quotidiens synchronisés avec les médias visuels. Dans le cinéma et la télévision traditionnels, Foley ajoute du réalisme en fournissant des sons comme des pas, des rouilles de tissu, ou des crémaillères de porte. Mais quand appliqué à l'audio 3D — aussi connu sous le nom d'audio spatial — Foley prend un rôle encore plus critique. Il ne s'agit plus seulement de faire correspondre un son à une action; il s'agit de placer ce son précisément dans un champ sonore tridimensionnel afin que l'auditeur le perçoit à partir d'un endroit, d'une distance et d'une direction spécifiques.
Le système auditif humain est remarquablement sensible aux repères spatiaux — différences interurales de temps, différences de niveau et filtrage spectral par l'oreille externe (pinnae). Foley en audio 3D doit respecter ces repères pour créer un sens authentique de l'espace. Que ce soit pour la réalité virtuelle (VR), la réalité augmentée (AR), le jeu ou le cinéma immersif, le placement précis de Foley peut faire la différence entre un environnement convaincant et celui qui se sent plat ou confus.
Cet article couvre les techniques et les flux de travail essentiels pour atteindre la précision spatiale avec Foley dans les productions audio 3D. Il s'appuie sur les pratiques industrielles utilisées par les concepteurs de sons dans les grands studios et offre des conseils pratiques à toute personne cherchant à élever son travail audio immersif.
Techniques de base pour le placement de la Foley spatiale
Le placement efficace de Foley pour l'audio 3D commence par la compréhension de la mise en page spatiale de la scène. Les techniques suivantes forment la base de tout workflow professionnel.
Cartographie spatiale et analyse des scènes
Avant d'enregistrer un seul son, étudiez l'environnement 3D pour lequel vous concevez. Dans un moteur de jeu ou une scène de VR, identifiez les dimensions physiques, les matériaux de surface et les propriétés acoustiques clés. Cartez les sons à partir desquels les sons doivent provenir : un personnage trace les pas sur un plancher en bois vers l'avant-droit, une cascade éloignée vers la gauche, une porte s'écrasant directement derrière.
Beaucoup d'artistes Foley collaborent avec des concepteurs de niveaux ou des ingénieurs de mélange pour aligner leur positionnement sonore sur la géométrie visuelle. Si une scène a un mur à gauche qui devrait bloquer le son, la Foley doit être recouverte de la droite dure avec un filtrage de passe bas approprié pour simuler l'occlusion.
Enregistrement binaulique pour les Cues Spatiaux Naturels
L'enregistrement binaural utilise deux microphones placés à l'intérieur d'une tête artificielle ou d'une tête factice (ou parfois les propres oreilles de l'artiste Foley) pour capturer le son exactement comme les oreilles humaines l'entendaient. Lorsqu'ils sont rejoués sur un casque, les enregistrements binaural reproduisent une scène sonore 3D extrêmement convaincante car ils contiennent toutes les différences interaurales naturelles, les différences de niveau et les repères de filtre pinna.
Par exemple, l'enregistrement de pas avec des microphones binaural tout en marchant autour de l'artiste Foley crée un sens naturel de la position et du mouvement. L'enregistrement inclut intrinsèquement l'angle de la source sonore par rapport aux microphones, rendant plus organique le panning ultérieur. Cependant, binaural fonctionne mieux lorsque la lecture finale sera sur écouteurs.
Ressources extérieures : Son sur son – Techniques d'enregistrement binautique- Oui.
Calibrage et mise en place dans l'espace 3D
La couche combine plusieurs enregistrements de la même action — par exemple, un pas lourd peut consister en une bourre de bois (faible fréquence), une égratignure (meilleure/haute) et un léger roulis de tissu. Chaque couche peut être panée et atténuée indépendamment pour créer une impression plus riche et plus spatiale. Si un personnage marche de gauche à droite, vous pouvez faire une égratignure légèrement inférieure à la bourre de bois haute pour simuler la façon dont les basses fréquences sont moins directionnelles.
Les postes de travail audio numériques modernes (DAWs) et les outils audio spatiaux (p. ex., Dolby Atmos render, Unity , spatializer) vous permettent de placer des sons en stéréo 2D ou en 3D complet (y compris la hauteur). La mise en panoramique en 3D utilise azimut (gauche/droite), élévation (up/down) et distance. Pour Foley, la distance est souvent la plus critique : la simuler avec réduction du volume, roll-off haute fréquence, et une réverbération plus humide.
Contrôle de distance et de volume avec réverbération
La perception de la distance est créée principalement par trois mécanismes : niveau global, perte de contenu haute fréquence (absorption d'air), et le rapport entre son direct et réverbérant. Foley placé loin devrait être plus silencieux, avec moins de haut de gamme et plus de réverbération. Pour Foley proche, le son sera plus fort, avec plus de clarté et une réverbération sèche et serrée. Dans de nombreux moteurs de jeu 3D, vous pouvez automatiser ces paramètres en utilisant des courbes d'atténuation basées sur la distance.
La réverbération est également essentielle pour établir la taille et la réflectivité de l'environnement. Une grande cathédrale a besoin de longues queues de réverbération diffuses même sur Foley sonne comme des pas, tandis qu'une petite salle tapissée devrait avoir presque aucune. Les réverbérations de convolution qui utilisent des réponses impulsionnelles des espaces réels peuvent ajouter de l'authenticité.
Délai de précision et synchronisation
En 3D, l'auditeur peut localiser les sons avec une grande précision temporelle. Un décalage de quelques millisecondes entre la Foley et l'action à l'écran est perceptible et détruit l'immersion. Les artistes de Foley utilisent des sessions de pointage -- avec l'éditeur pour aligner les repères frame-by-frame. Lorsque l'enregistrement pour VR ou les médias interactifs, le timing doit être dynamique : le son de Foley est déclenché par des événements (p. ex., contact avec le pas de pied) et doit être instantané.
Pour maintenir la cohérence spatiale, le délai de traitement binaural ou ambassique doit être compensé. Par exemple, certains plug-ins audio spatiaux ajoutent une latence allant jusqu'à 10 ms. Surveillez toujours la latence totale du système et ajustez le décalage de lecture Foley en conséquence. Pour les signaux critiques, alignez la forme d'onde à la résolution de l'échantillon.
Stratégies avancées de placement Foley
Une fois les fondamentaux solides, vous pouvez utiliser des techniques plus avancées pour pousser plus loin la précision spatiale.
Personnalisation de la fonction de transfert liée au chef (FASS)
Les HRTL génériques qui sont livrés avec des plug-ins binaural standard fonctionnent bien pour la plupart des auditeurs, mais ils ne sont pas personnalisés. Pour les productions VR ou cinématiques haut de gamme, certaines équipes créent des HRTF personnalisés pour les personnages principaux ou même pour l'utilisateur. Les HRTF personnalisés sont mesurés en plaçant de petits microphones dans le canal d'oreille de l'auditeur en jouant des balayages sous de nombreux angles.
Si les FASS ne sont pas réalisables sur mesure, utilisez un ensemble de données de haute qualité provenant d'un établissement de recherche (p. ex. SADIE II ou CIPIC). De nombreux plug-ins audio commerciaux vous permettent de charger vos propres fichiers FASS. Même en sélectionnant un FASS qui correspond à la taille moyenne de la tête de votre auditoire cible peut améliorer la précision de localisation pour Foley.
Audio et métadonnées basées sur des objets
Dans Dolby Atmos et formats similaires, chaque son peut être traité comme un objet audio avec des métadonnées associées : position (X, Y, Z), taille et chemin de mouvement. Les artistes Foley travaillant dans des workflows basés sur des objets peuvent intégrer directement des métadonnées spatiales dans la session multipiste. Ces métadonnées sont ensuite utilisées par le moteur de mixage ou de jeu pour rendre le son en temps réel. Par exemple, un pied de pied de Foley peut être un objet qui se déplace automatiquement avec un os d'animation caractère.
Ressources extérieures : Dolby Atmos – Audio par objet- Oui.
Mouvement dynamique et effets Doppler
Pour créer un mouvement convaincant en audio 3D, vous devez simuler l'effet Doppler et le panoramique continu. Pour le mouvement, enregistrer plusieurs prises avec la source sonore se déplaçant par rapport au microphone — par exemple, un artiste Foley faisant glisser une chaise sur le sol tout en marchant autour d'une tête de mannequin binaural. Puis éditer ceux-ci prend dans une casserole transparente.
Dans les médias interactifs, l'effet Doppler peut être calculé en temps réel en fonction de la vitesse relative de la source et de l'auditeur. Mais pour les médias linéaires pré-rendus, vous devez le précalculer. La clé est de correspondre à la vitesse perçue avec le visuel: une marche lente a besoin de changements subtils de pas; une voiture qui accélère a besoin d'un décalage spectaculaire et enroulant.
Masquage spatial et équilibrage de fréquence
Dans une scène 3D dense avec de nombreux sons, Foley peut masquer d'autres audios critiques ou se masquer. Le masque spatial se produit lorsque deux sons occupent des plages de fréquences et des positions qui se chevauchent. Pour éviter cela, utilisez un égaliseur pour découper l'espace : par exemple, si le dialogue est au centre, pan Foley aux côtés et rouler vers les milieux où le dialogue se trouve. En 3D, vous pouvez également diffuser des sons verticalement — en superposant le pas de pied bas dans la gamme de basse et en cliquetant Foley plus haut. Cela profite de la capacité de localisation dépendante de fréquence de l'oreille (les basses fréquences sont moins directionnelles, les hautes fréquences sont très directionnelles).
Outils et équipements pour Foley Spatial
Les bons outils simplifient le travail spatial Foley. Voici un regard sur les équipements et logiciels essentiels.
Sélection et placement des micros
- Microphones à binômes: Neumann KU 100, Espace libre 3Dio, ou binaurals intra-auriculaires personnalisés. Meilleur pour capturer des repères spatiaux naturels en une prise.
- Microphones ambassiques: Sennheiser Ambeo VR Mic, Zoom H3-VR. Enregistrez le son plein-sphère (format A) pour décoder ultérieurement au binaural. Utile pour le Foley ambiant, moins pour un placement précis de la source ponctuelle.
- Fermez les paires stéréo : Les techniques stéréo ORTF ou XY jumelées avec des microphones spot. Donne de la flexibilité pour la poêle et le traitement de Foley plus tard.
- Microphones de contact: Pour capturer les sons structuraux (touffes, impacts) qui peuvent être traités et placés dans un logiciel.
Ressources extérieures : ProSoundWeb – Foley d'enregistrement pour l'audio immersif- Oui.
Plug-ins audio DAW et Spatial
La plupart des DAWs principaux prennent désormais en charge les flux de travail audio 3D.
- Je suis désolé. Dolby Atmos Renderer (intégré dans Pro Tools, Nuendo, Logic Pro).
- Je suis désolé. Cher réalité cherVR PRO â binaural avec contrôle de distance.
- Je suis désolé. La révolution de Steinberg SPAT â mélange spatial en temps réel.
- Je suis désolé. Oculus Spatializer ou Valve Audio vapeur pour les moteurs de jeu.
Ces outils permettent le placement par objet, la convolution du FRHF et la mise au point de la réverbération pour Foley.
Surveillance de l'écouteur
La surveillance précise n'est pas négociable. Utilisez des écouteurs de référence (par exemple Sennheiser HD 600, Beyerdynamic DT 990) qui ont une réponse à fréquence plate et une bonne scène sonore. Lors de l'enregistrement, surveillez par des plug-ins binaural pour savoir exactement comment la Foley sera localisée. Un piège commun est de surveiller en stéréo et puis supposez que la binaural sonnera bien — cela nécessite souvent un ajustement.
Flux de travail pratique pour les artistes Foley
Pour produire de façon cohérente Foley, il faut adopter un workflow structuré.
1. Planification de la préproduction
- Passez en revue le script, le storyboard ou le niveau de jeu.
- Créer une carte Foley : lister chaque son et sa position 3D prévue.
- Déterminer quels sons seront enregistrés en direct (pour le mouvement) et qui seront superposés à partir des bibliothèques.
- Configurez l'espace d'enregistrement avec un traitement acoustique approprié — il devrait être aussi sec que possible pour permettre l'ajout de la réverbération plus tard.
2. Enregistrement avec intention spatiale
- Utilisez des microphones binaural ou ambassiques pour des mouvements complexes de tout le corps.
- Enregistrez plusieurs angles pour la même action (p. ex., marche de gauche, centre, droite).
- Enregistrez toutes les métadonnées : numéro de prise, position du microphone, distance de la tête factice, type de surface.
- Gardez le niveau d'enregistrement élevé pour éviter le bruit, mais laissez la tête de chambre pour les envois de réverbération.
3. Édition et spatialisation
- Importer des clips dans DAW et les aligner sur la chronologie d'image ou d'animation.
- Appliquer les panners spatiaux: ensemble azimut, élévation, distance.
- Ajouter la réverb (de préférence une réverbération convolution avec des IR correspondant à la scène).
- Utilisez l'automatisation pour gérer les mouvements et les changements de distance dynamiques.
- Vérifiez le mélange en binaural et sur casque, puis testez sur un système d'enceinte si possible.
4. Collaboration et rétroaction
- Envoyez des mixes rugueuses au concepteur ou au réalisateur du son.
- Discutez de toute question de localisation — si un son est trop loin à gauche ou trop près, modifiez le panneau.
- Pour les projets interactifs, importez Foley dans Unity ou Unreal avec les composants de spatialisateur corrects.
- Itérer en fonction des tests de jeu ou de la rétroaction de dépistage.
Défis et solutions communs
Défi : Annulation de phase lors de la mise en couches
La mise en couches de micros ou de prises multiples peut causer des problèmes de phase, éclaircissant le son. Solution : Aligner visuellement les transitoires de toutes les couches dans la DAW. Utilisez un compteur de corrélation de phase. Si nécessaire, bouder une couche par quelques échantillons jusqu'à ce que le bas de gamme se renforce au lieu d'annuler.
Défi : Perception de distance incompatible
Sans réverbération correcte, les sons lointains peuvent encore sonner proches. Solution : Toujours correspondre à la longueur de la queue de la réverbération et au rapport eau/sec à la distance prévue. Utilisez des réflexions précoces pour ancrer la source dans la pièce. Un son qui est loin devrait avoir presque aucun son direct et beaucoup de réverbération diffuse.
Défi : Fatigue de l'auditeur de Foley sur-traité
Une utilisation excessive des filtres binauraux ou un panning extrême peut causer de l'inconfort. Solution : Gardez les enregistrements binauraux naturels comme base. Ajoutez seulement la spatialisation artificielle si nécessaire. Prenez des pauses en mélangeant et comparez avec les enregistrements de référence du monde réel.
Conclusion
La maîtrise de la cartographie spatiale, de l'enregistrement binaural, de la mise en couches, du panning et de la simulation à distance permet aux artistes de Foley de créer des paysages sonores immersifs qui placent l'auditeur avec précision dans l'action. Les techniques décrites ici, des fondamentaux fondamentaux tels que l'analyse de scène et le contrôle du volume aux méthodes avancées comme la personnalisation HRTF et les métadonnées basées sur des objets, forment une boîte à outils complète pour tout professionnel de l'audio spatial.
Comme l'audio 3D continue de croître dans le jeu, VR, film, et expériences en direct, la demande pour une Foley spatialement précise ne fera qu'augmenter. En adoptant ces pratiques et en investissant dans les outils et les flux de travail appropriés, vous pouvez élever vos productions à de nouveaux niveaux de réalisme. AES communications sur la perception sonore spatiale ou les Foley artiste workflow en VR à GDC- Oui.