Ton-Techniken für 360 Sound Aufnahme (räumliches Video, VR)

Dieser Artikel befasst sich mit den fortgeschrittenen Techniken der 360-Sound-Aufnahme und stützt sich dabei auf die Erkenntnisse aus dem Video „Audio Production for YouTube VR“ von Tall Guy Films.

Das Video, das unter https://www.youtube.com/watch?v=8o_v8FE7QHM zu finden ist, dient als Grundlage für unsere Erkundung der Entwicklung des räumlichen Audiodesigns und der Gestaltung von immersiven Klanglandschaften.

Im Folgenden fassen wir die wichtigsten Erkenntnisse aus dem Video zusammen, um ein umfassendes Verständnis der kreativen und technischen Feinheiten der räumlichen Audioaufnahme für Virtual-Reality- und 360-Grad-Videoprojekte zu vermitteln.

Die Entwicklung des Spatial Audio Designs

Im Bereich der 360-Grad-Videos steht das immersive Erlebnis im Vordergrund. Das visuelle Element umgibt den Betrachter, aber es ist der räumliche Ton, der den Realismus wirklich verstärkt und die virtuelle Umgebung überzeugend real macht.

„Wenn die Leute 360-Videos anschauen, wollen sie sich auch umschauen. Das ist mit Abstand der beste Anwendungsfall für 360-Audio.“

Diese Erkenntnis unterstreicht die Notwendigkeit von räumlichem Audio, um Erlebnisse zu schaffen, die nicht nur gesehen, sondern auch gefühlt werden und das 360 grad video in etwas spürbar Immersives verwandeln.

Immersive Klangwelten schaffen

Die Wahl des richtigen Werkzeugs für die Erzählung ist entscheidend, vor allem wenn die Geschichte einen immersiven Ansatz erfordert. Die 360-Grad-Tonaufnahme tritt ins Rampenlicht, wenn wir über herkömmliche Videoformate hinausgehen, um Erzählungen zu erkunden, die eine allumfassende Perspektive erfordern.

Nutze die 360-Grad-Technologie nicht nur um ihrer selbst willen. Versuche, Anwendungsfälle zu finden, die mit herkömmlichen Stereo-Aufnahmemethoden nicht möglich gewesen wären so mein Tipp zur Einführung.

„Wenn es ein Format gibt, das nur mit einer normalen Kamera funktioniert, dann verwende eine normale Kamera. Aber sobald du etwas mit einer Point-of-Use-Perspektive hast, kann es interessant werden.“

Es geht nicht nur um den technischen Akt der Tonaufnahme, sondern darum, die Gelegenheit zu ergreifen, die erzählerische Tiefe zu erhöhen. Wenn sich die Geschichte in einem Raum entfaltet, der das Publikum zur Erkundung und Interaktion einlädt, muss der Ton mitziehen und Hinweise geben, die die Erkundung anleiten und bereichern.

Es geht darum, die Essenz des Moments und der Umgebung einzufangen und dem Publikum das Gefühl zu geben, dass es wirklich in die Erzählung eingebunden ist.

Mikrofontechnologie und räumliche Aufnahme

Bei der 360 Audioaufnahme handelt es sich um eine fortschrittliche Stereomikrofontechnik, die den Ton aus mehreren Winkeln in jeder Richtung um das Mikrofon herum aufnimmt und so eine sphärische Klanglandschaft erzeugt. So entstehen Audiodateien, die zu dem räumlichen 360-Videomaterial passen und ein immersives Hörerlebnis bieten.

Diese Methode ist wichtig für Virtual Reality (VR) und 360-Grad-Videoproduktionen, bei denen das Ziel darin besteht, den Zuhörer in eine Umgebung einzutauchen, die sich genauso real und multidimensional anfühlt wie das visuelle Erlebnis.

Durch diese Art der Audioaufnahme können die Macher/innen sicherstellen, dass die Zuschauer/innen die Welt nicht nur in 360 Grad sehen, sondern sie auch auf eine ähnlich umfassende Weise hören, was das Gesamterlebnis noch verstärkt.

Du kannst es kaum erwarten, die Details der direkten Aufnahmemodi und der verschiedenen Mikrofoneinstellungen zu erfahren? Lies meine 360 Mikrofonübersicht.

Denke daran, dass es keine Komplettlösung für VR-Audio aus einer Hand gibt. Manchmal brauchst du auch ein spezielles Ambisonic-, Computer- oder Stereomikrofon, manchmal einen separaten Recorder und manchmal ganz andere Sounds.

Bitte nimm keinen binauralen Sound auf.

In Diskussionen über 360-Audio werden oft die Begriffe „binaurales Audio“ und „Ambisonics Audio“ verwechselt. Obwohl beide Begriffe mit Raumklang zu tun haben, dienen sie unterschiedlichen Zwecken.

Stereo- oder binaurales Audio wurde entwickelt, um die Art und Weise nachzuahmen, wie Menschen Geräusche natürlich hören. Allerdings fehlt ihm die Möglichkeit, den Kopf zu verfolgen, was es für 360-Grad-Videos, bei denen sich die Ausrichtung des Hörers ändern kann, weniger geeignet macht.

Um diese Lücke zu schließen, wurde das quad-binaurale Mikrofon entwickelt, das eine innovative Ergänzung meines Arsenals darstellt. Dieses spezielle binaurale Stereomikrofon kombiniert die immersiven Qualitäten binauraler Aufnahmen mit der Flexibilität, die für 360-Grad-Inhalte erforderlich ist, und ermöglicht Head-Tracking, damit der Zuhörer das Gefühl hat, sich in einem virtuellen Raum zu befinden.

Aber genau hier kommt das Ambisonic Mic ins Spiel. Es erzeugt ein immersives Klangfeld, das später auf Kopfbewegungen oder sogar auf die richtige Lautsprecheraufstellung übertragen werden kann. Die Aufnahme von VR-Audio erfordert ein Ambisonic-Mikrofon und Tontechniker, die verschiedene Aufnahmemodi mit Mehrkanalton verwenden.

Ambisonics und mehr: Die Wahl des richtigen Mikrofons

Auf der Suche nach möglichst authentischen und einhüllenden Klanglandschaften für VR ist die Wahl des Mikrofons entscheidend.

„Meistens nehmen die Leute 360-Grad-Audio mit einem Ambisonics-Mikrofon auf, z. B. dem Sennheiser AMBEO“, habe ich beobachtet.

Anders als herkömmliche Mikrofone sind Ambisonic-Mikrofone speziell dafür ausgelegt, Schall aus allen Richtungen aufzunehmen, was sie für die Schaffung immersiver Audioumgebungen unverzichtbar macht. Das Sennheiser AMBEO zum Beispiel ist dafür bekannt, dass es die Tiefe, Richtung und Nuancen des Schalls aus zwei oder drei Richtungen aufnimmt und den Zuhörern ein wirklich dreidimensionales Hörerlebnis bietet.

Der Einsatz solcher Mikrofone ist nicht nur eine technische, sondern auch eine erzählerische Entscheidung, denn sie ermöglichen es, Klanglandschaften zu schaffen, die so reichhaltig und komplex sind wie die visuellen Welten, die sie begleiten.

Auf die Größe kommt es an

In der Landschaft der 360-Audio-Aufnahmen spielen die Größe und Mobilität der Aufnahmegeräte eine wichtige Rolle im Produktionsprozess. Mikrofone wie das Sennheiser VR-Mikrofon bieten zwar eine hervorragende Qualität, erfordern aber oft zusätzliche Kabel und Aufnahmegeräte. Trotz der drei Aufnahmemodi (aufrecht, auf dem Kopf stehend und Endfire) kann dies die Mobilität und Flexibilität bei On-Location-Drehs einschränken.

Auf der anderen Seite bieten Geräte wie der Zoom H3-VR eine mobilere Lösung, da es sich um einen Recorder mit eingebautem Ambisonic-Mikrofon handelt. Allerdings geht dieser Komfort manchmal auf Kosten der Audioqualität im Vergleich zu aufwändigeren Geräten.

Der Zoom H3-VR ist zwar vielseitig und benutzerfreundlich, kann aber nicht die gleiche Tiefe und Nuance einfangen wie größere, komplexere Mikrofonarrays. Es kann aber auch nützlich sein, um Veranstaltungen mit einem iOS-Gerät mit integriertem Decoder zu streamen.

Dann gibt es noch das ORTF 3D-Setup, das ein weiteres Extrem im Spektrum der 360-Audio-Aufnahmeoptionen darstellt. Es bietet Standard-Stereoaufnahmen, aber einen einzigartigen Ausgleich, indem es eine Methode zur einfachen Konvertierung von Ambisonics-Audio bietet, was es zu einer überzeugenden Wahl für diejenigen macht, die detaillierte räumliche Klanglandschaften aufnehmen wollen, ohne dabei zu viele Kompromisse bei der Mobilität einzugehen.

Allerdings habe ich mit einem solchen Surround-Sound-Mikrofon nur in extremen Fällen gearbeitet, in denen die VR-Kamera ebenso groß war.

Authentizität der Umgebung einfangen

Um die Zuhörerinnen und Zuhörer wirklich an einen anderen Ort zu versetzen, ist es wichtig, die Authentizität der Geräusche der Umgebung einzufangen. Die Umgebungsgeräusche sind das, was du mit dem Ambisonics-Mikrofon bekommst.

Aber mit den rohen Ambisonics kommst du nicht weit, wenn du später die pseudo-binaurale Aufnahmemethode mit formatierten Ambisonic-Dateien mischst.

Für die pseudo-binaurale Aufnahmemethode wav brauchst du mehr:

„Du brauchst ein paar zusätzliche isolierte Klangquellen… deshalb habe ich noch einen Soundbag… das ist im Grunde auch ein Mehrkanalrecorder mit einem ziemlich guten Funkmikrofonsystem“, habe ich erklärt.

Dieser Ansatz verdeutlicht die vielschichtige Komplexität der Tonaufnahme für VR. Neben der Verwendung von Ambisonic-Mikrofonen sind die Einbeziehung isolierter Schallquellen und der Einsatz eines vielseitigen Mehrkanal-Recorders der Schlüssel zum Sammeln einer Vielzahl von Geräuschen, die den Realismus der virtuellen Umgebung erhöhen.

Ob das Rascheln von Blättern, das ferne Brummen einer Stadt oder die vertraute Klangfarbe einer Stimme – jedes Element trägt zum Klangteppich des Hörerlebnisses bei. Durch die sorgfältige Aufnahme und Integration dieser Geräusche können die Ersteller/innen eindringliche Klanglandschaften schaffen, die nicht nur das visuelle Erlebnis ergänzen, sondern auch die emotionale und sensorische Bindung des Hörers/der Hörerin mit der virtuellen Welt vertiefen.

Herausforderungen bei Live-Aufnahmen überwinden

Die Audio-Live-Aufnahmen für 360-Grad-Inhalte stellen besondere Herausforderungen dar, vor allem wenn es um die Platzierung der Mikrofone und den Umgang mit Umgebungsgeräuschen geht. Das Ziel ist es, einen unverfälschten Ton aufzunehmen, ohne die visuelle Integrität der Szene oder das immersive Erlebnis zu beeinträchtigen.

Strategien für unsichtbare Mikrofonplatzierung

In der Welt der 360-Grad-Videoproduktion ist das Mantra „Versuche, so klein wie möglich zu sein“ mehr als nur ein Ratschlag; es ist eine Notwendigkeit. Das Letzte, was wir wollen, ist, dass unsere Mikrofone ungewollt zu Stars der Show werden und in der Nachbearbeitung zeit- und kostenaufwändig aus jeder Szene gelöscht werden müssen.

Das ist besonders wichtig bei Produktionen, bei denen das immersive Erlebnis im Vordergrund steht und jeder Hinweis auf den Produktionsprozess die Illusion zerstören kann, an der wir so hart gearbeitet haben.

Die Herausforderung besteht also darin, unsere Mikrofone strategisch so zu platzieren, dass sie unsichtbar und dennoch effektiv bleiben und jede Nuance des Klangs einfangen, ohne die Aufmerksamkeit auf sich zu ziehen. Das erfordert oft innovative Lösungen, von der Tarnung der Mikrofone im Set bis zur Verwendung von Miniaturmikrofonen, die leicht vor den Augen der Kamera versteckt werden können.

Anpassung an Umgebungsgeräusche und Lärm

Beim Aufnehmen von Ton in einer Live-Umgebung gibt es unzählige unvorhersehbare Elemente, vom Rascheln der Blätter in einer leichten Brise bis hin zum plötzlichen Dröhnen eines Flugzeugs über uns.

„Du brauchst eine Menge Kabel… und du möchtest auch eine Vorschau dessen, was du aufnimmst, denn wenn du die Kamera einfach hier platzierst… auf Aufnahme drückst und weg läufst, hast du keine Ahnung, was passiert.“

Diese Erkenntnis unterstreicht, wie wichtig es ist, sich nicht nur auf das Erwartete vorzubereiten, sondern sich auch auf das Unerwartete einzustellen. Die Möglichkeit, aus der Ferne auf die Transportsteuerung zuzugreifen, ist von unschätzbarem Wert, denn so können wir die Einstellungen im Handumdrehen anpassen und auf die Dynamik der Live-Streaming-Umgebung reagieren.

Es geht darum, ein Gleichgewicht zwischen dem Wunsch nach Klangtreue und den praktischen Aspekten der Aufnahme vor Ort zu finden und sicherzustellen, dass unsere Präsenz als Schöpfer durch die immersive Qualität des Klangs spürbar ist und nicht erst im Endprodukt.

Post-Production Virtual Reality Ambisonics Audio

In der sich entwickelnden Landschaft der virtuellen Realität (VR) und der 360-Grad-Videoproduktion geht es um die Kunst und Wissenschaft der Aufnahme und Bearbeitung von Raumklang.

In den weiteren Abschnitten werden zwei wichtige Aspekte der Audioproduktion für VR beleuchtet: der komplizierte Prozess des Abmischens und Bearbeitens für räumlichen Realismus und die kreative Anwendung von räumlichem Audio im Storytelling.

Abmischen und Schneiden für räumlichen Realismus

In der Postproduktion kann die Bedeutung der Bearbeitung von räumlichen Audiodaten für eine extrem realistische räumliche Aufnahme gar nicht hoch genug eingeschätzt werden. Ich bin auf Szenarien gestoßen, in denen die Audiomischung aufgrund falsch durchgeführter Aufnahmesitzungen zu einer unüberwindbaren Herausforderung wurde. Das Übersprechen der verschiedenen Funkmikrofone führte zu einer Kakophonie, die auch durch noch so gutes Abmischen nicht zu beseitigen war.

„Versuche, so früh wie möglich über den Ton nachzudenken… versuche, so früh wie möglich in ein Projekt einzusteigen.“

Es war der klassische Fall eines Toningenieurs, der sich in das komplexe Gebiet der räumlichen Beschallung wagte, ohne die Feinheiten zu verstehen, und selbstbewusst sagte: „Klar, ich bin dein Mann“, nur um dann Ergebnisse zu liefern, die den Anforderungen des Projekts nicht gerecht wurden. Diese Erfahrung ist eine Warnung: Sei nicht derjenige, der die Komplexität der VR-Audioerfassung unterschätzt.

Der kreative Einsatz von Spatial Audio im Storytelling

„Spatial Audio kann die Geschichte verändern oder ihr einen Mehrwert verleihen“, was die transformative Kraft von immersivem Sound in narrativen Kontexten unterstreicht. Die Rolle des Audio-Editors ist entscheidend, wenn es darum geht, das Potenzial von Spatial Audio voll auszuschöpfen und die Art und Weise, wie Geschichten erzählt und erlebt werden, zu gestalten.

Durch den kreativen Einsatz von Ambisonic Audio und binauralem Sound können Geschichtenerzähler/innen die Aufmerksamkeit des Publikums lenken, Emotionen hervorrufen und das Eintauchen in die Erzählung verstärken. Ob durch die subtilen Geräusche der Umgebung oder die dynamischen Veränderungen in einem Klangfeld – Raumklang ermöglicht eine nuanciertere und fesselndere Erzähltechnik.

Tools wie Playback Monitor etc.

Dieser kreative Prozess wird durch Tools wie die Zoom Ambisonics Player Software und andere Technologien unterstützt, die eine einfache Umwandlung der Ambisonics-Dateien in Audio ermöglichen, so dass Audioprofis mit verschiedenen Klängen und Perspektiven experimentieren können.

Letztlich geht es darum, eine Komplettlösung für VR-Audio zu schaffen, die den Hörern ein immersives Erlebnis aus einer Hand bietet, frei von den Zwängen traditioneller Audioproduktionsmethoden.

Der Einsatz dieser fortschrittlichen Techniken und kreativen Strategien in der Audioproduktion stellt sicher, dass das Endprodukt – egal ob Video- oder Audio-Editor, Mixed-Reality-Inhalte, ein Live-Stream-Event oder ein VR-Erlebnis – das Versprechen von immersivem Audio einlöst.

Durch die Bewältigung der Herausforderungen bei der Aufnahme, Abmischung und Bearbeitung von Spatial Audio können Kreative dem Publikum ein wahrhaft umhüllendes Klangerlebnis bieten, das über das reine Zuhören hinausgeht und zu einem Schlüsselelement der Erzählung und der immersiven Reise wird.

Bildsperre ist keine Bildsperre

In der Welt der VR- und 360-Grad-Videoproduktion ist es von entscheidender Bedeutung, die Bildsperre zu erreichen. Das ist der Moment, in dem ich als Tontechniker den endgültigen Schnitt vom Videoteam erhalte. Dann beginnt der eigentliche Spaß: die Tonmischung.

Das ist etwas, das sich nur schwer in einen Blog-Beitrag als Video zum kostenlosen Download packen lässt, aber Teil des Coachings VRTonung lernen ist.

Aber jetzt kommt der Clou: Manchmal wird das Video nach der Aufnahme gedreht, damit es besser zur Perspektive der Szene passt. Klingt einfach, oder? Nun, nicht so schnell. Diese Drehung ist zwar gut für das Bild, kann aber den Ton stören. Die gute Nachricht? Es ist ganz einfach, die Dateien im Ambisonics b-Format so zu drehen, dass sie zur neuen Ausrichtung des Videos passen.

Dieses Szenario zeigt, warum eine klare Kommunikation zwischen Audio- und Videoteams unverzichtbar ist. Es zeigt auch, dass Tontechniker/innen Ambisonics-Audiodateien genau verstehen müssen.

Die Zukunft von interaktivem und immersivem Audio

Wenn wir uns ansehen, was als Nächstes auf VR und Immersive Audio zukommt, wird klar, dass wir an der Schwelle zu einigen bahnbrechenden Innovationen stehen. Die Reise ist aufregend, aber sie bringt auch einige Aha-Momente mit sich, vor allem wenn es darum geht, die Tontechniker früh genug einzubeziehen.

Kennst du diese Meetings, bei denen der Tontechniker das Memo zuletzt bekommt?

Das Problem ist, dass die Tonleute meistens nicht in diese Frage einbezogen werden… es ist wirklich schwer zu erraten, wie das Endergebnis aussehen wird.

Die Sache mit 360-Videos und VR ist die: Wenn du sie nicht schon mit einem 3D-Video- oder Audio-Editor kombinierst, verpasst du etwas. Erinnere dich daran, was ich gerne sage:

„In VR kannst du ein Element übersehen, aber nicht überhören“.

Es geht darum, jede Kopfdrehung und jeden Blick mit einem Sound zum Leben zu erwecken, der genauso dynamisch ist wie der visuelle Leckerbissen, den du servierst. Da die Technik immer intelligenter wird, bereiten wir uns auf eine Zukunft vor, in der immersiver Surround-Sound die visuellen Eindrücke nicht nur ergänzt, sondern vervollständigt.