3D Audio Anfänger: Auf in die Sound Matrix

Herzlich willkommen zum faszinierenden Universum des Spatial Audio, der Welt des 3D Sounds und des immersive audio! Das sind Begriffe, die hast du bestimmt schon einmal gehört. Während die meisten Tontechniker dabei aber nur über Dolby Atmos sprechen, ist das für mich nur ein kleines Puzzlestück der Möglichkeiten. Daher möchte ich mal einen kleinen großen Überblick geben was da draußen noch so auf uns wartet, vertont zu werden.

Seit über einem halben Jahrzehnt mache ich ausschließlich Anwendungen im Bereich der immersiven Medien. Das machte mich im deutschsprachigen Raum wohl zu einer der größten Enthusiasten zu dem Thema. Auch zu einem der größten Kritiker von diesem 3D Sound. Also Popcorn holen und los gehts!

Was ist 3D Audio – was nicht

3D Audio, beschreibt eine Audiotechnologie, die den Klang in einem dreidimensionalen Raum präzise wiedergibt. Im Gegensatz zu traditionellen Stereo- oder Surround-Soundformaten erlaubt es 3D Audio, Klänge nicht nur vorne, hinten, links und rechts, sondern auch über und unter dem Hörer wahrnehmbar zu machen.

Warum könnte das ein bedeutender Fortschritt sein? Nun, die menschliche Hörwahrnehmung ist von Natur aus dreidimensional. Wir erkennen und interpretieren Klänge in unserem Alltag aufgrund ihrer räumlichen Positionierung. Wenn jemand hinter uns steht und spricht, können wir das Dank unserem Hörapparat erkennen, ohne die Person sehen zu müssen.

Technologisch ist es mittlerweile möglich geworden, diesen räumlichen Klangeindruck auch künstlich nachzubilden. Daher kommt eine Spielwiese ungeahnter Möglichkeiten auf uns zu.

Wie kann man 3D Audio überhaupt hören?

Einer der Gründe, warum 3D-Audio-Technologien nur langsam den Mainstream erreichen, liegt darin, dass es manchmal schwierig sein kann, ein authentisches 3D-Klangerlebnis zu erzeugen. Die Herausforderung besteht darin, eine immersive experience zu schaffen, die den Hörer vollständig in die Klangwelt eintauchen lässt. Hierfür gibt es zwei gängige Möglichkeiten: Lautsprecher und Kopfhörer.

Lautsprecher

Beginnen wir mit der Lautsprecherkonfiguration. Obwohl 5.1 Surround-Sound als gängiges System betrachtet wird, hat es sich ja nicht wirklich im häuslichen Umfeld durchgesetzt. Diese Konfiguration erfordert fünf Lautsprecher, die vorne links, vorne rechts, in der Mitte und hinten links sowie rechts positioniert werden, ergänzt durch einen sechsten Lautsprecher in Form eines Subwoofers, der für Bass Frequenzen wie Explosionen oder Effekte sorgt (Daher gern auch LFE genannt, Low Frequency Effects).

Jedoch erfordert 3D Audio noch mehr Lautsprecher, wie zum Beispiel das beliebte Setup 7.1.4 in Tonstudios. Das bedeutet, dass in Studios mindestens zwölf Lautsprecher an Wänden oder Decken installiert werden müssen, um die räumliche Klangwiedergabe zu ermöglichen. Sieben auf der Horizontalen und vier von oben, sowie ein oder auch mal zwei Subwoofer für die Bässe.

Um für den Konsumenten eine komfortablere Option zu bieten, existieren Soundbars. Diese länglichen Lautsprecher werden häufig unter oder vor dem Fernseher platziert und nutzen eine Vielzahl von Lautsprechern, um den Klang in verschiedene Richtungen zu projizieren – nach hinten, zur Seite oder sogar nach oben.

Die Soundbars nutzen die Raumreflexion, indem der Schall an Wänden oder Decken reflektiert wird, man spricht auch von virtuellen Lautsprechern. Allerdings gestaltet sich die Wiedergabe von Klängen, die von hinten kommen sollen, noch herausfordernd. Daher gibt es meist zusätzliche Satelliten Lautsprecher zum Koppeln an die Soundbar zu kaufen. Es kann sich auch ein zusätzlicher Basslautsprecher lohnen.

Kopfhörer

Als Alternative zu den Lautsprechersystemen bieten Kopfhörer eine persönlichere Lösung für 3D Audio. Die weitverbreitete Nutzung ermöglicht eine binaurale Wiedergabe, wobei spezielle Geräte nicht zwingend erforderlich sind. Auch wenn Hersteller euch liebend gerne ein neues Paar verkaufen wollen.

Die entscheidende Voraussetzung für die Wiedergabe von 3D Audio-Inhalten ist, dass die Inhalte entweder binaural vorliegen oder das Wiedergabegerät in Echtzeit eine Umwandlung auf zwei Kanäle vornimmt, wie es zum Beispiel bei Dolby Atmos geschieht.

Dennoch ist zu beachten, dass nicht alle als „3D Audio“ beworbenen Inhalte auch tatsächlich ein authentisches 3D-Klangerlebnis bieten. Einige Formate eignen sich besser für bestimmte Genres oder Anwendungen, doch dazu später mehr.

Um das optimale Hörerlebnis zu erzielen, empfehle ich Over-Ear-Kopfhörer, die den Klang weiter vom Trommelfell erzeugen. Kopfhörer mit einem möglichst linearen Frequenzgang verfälschen den Audioinhalt am wenigsten. Eingebautes Head-Tracking-Funktion, das bereits in einigen Modellen wie den Airpods Max vorhanden sind, passen das Klangfeld in Echtzeit an die Kopfbewegungen des Hörers an. Das ermöglicht eine Klang-Dimension auf die wir später noch genauer eingehen.

Auf Plattformen wie Apple Music kann man z.B. jetzt schon Dolby Atmos Mischungen mit der dynamischen Kopferfassung hören. Man braucht natürlich noch die passenden Airpods dazu. Doch das Problem daran ist: Keine der Mischungen wurde für Head-Tracking gemischt, sondern Lautsprecher. Daher kam ich auf die Idee mal eine Übersicht zu schaffen, wie man die verschiedenen Anwendungen, Formate und Wiedergabemedien strukturieren kann. Damit 3D Audio auch wirklich Immersion schaffen kann.

Dolby Atmos – die Technologie hinter 3D Audio

Dolby Atmos ist eine revolutionäre Audio-Technologie, die es ermöglicht, 3D-Audio in Filmen, Musik und Spielen zu erleben. Im Gegensatz zu herkömmlichen Stereo- und Surround-Sound-Systemen, die den Klang auf eine begrenzte Anzahl von Kanälen verteilen, verwendet Dolby Atmos eine Vielzahl von Signalquellen, um eine dreidimensionale Klangumgebung zu schaffen. Diese Technologie ermöglicht es, Klänge präzise im Raum zu positionieren, sodass sie von oben, unten, vorne, hinten und von den Seiten kommen können.

Das Besondere an Dolby Atmos ist seine Fähigkeit, den Zuhörer vollständig in das Geschehen einzubeziehen. Durch die Verwendung von objektbasiertem Audio können Klangobjekte unabhängig voneinander im Raum platziert und bewegt werden. Dies schafft eine immersive und realistische Klangwiedergabe, die weit über das hinausgeht, was traditionelle Stereo- und Surround-Sound-Systeme bieten können.

Dolby Atmos ist nicht nur auf Kinos beschränkt. Die Technologie hat auch Einzug in Heimkinos, Soundbars und sogar Kopfhörer gehalten. Dies bedeutet, dass man die beeindruckende Klangqualität von Dolby Atmos auch zu Hause oder unterwegs genießen kann. Egal ob bei einem actiongeladenen Film, einem mitreißenden Musikstück oder einem spannenden Videospiel – Dolby Atmos sorgt für ein unvergleichliches Hörerlebnis.

Die 3D Audio Matrix

Zugegeben, es gibt schon einige Artikel für Einsteiger und angeblich “alles, was man wissen muss.” Mich treiben diese aber in den Wahnsinn aus folgendem Grund: Es wird schön die Geschichte erzählt mit Mono, Stereo, Surround und dem neuen Ding: Dolby Atmos. In meiner Wahrnehmnung des immersiven Audios geht es aber jetzt gerade erst los, mit Audioproduktionen, die man mit dem darunterliegendem Format AC-4 nicht einmal abbilden kann.

Meine 3D Audio Matrix bietet einen umfassenderen Ansatz, der nicht nur berücksichtigt wo ich Audioobjekte platzieren kann. Sondern auch ob ich nur nach vorne schauen soll (0DoF), ich meinen Kopf rotieren kann (3DoF), oder mich sogar im Raum bewegen kann (6DoF). DoF steht für “Degrees of Freedome”, also Freiheitsgerade. Dieser Ansatz integriert auch das Konzept von ’spatial audio‘, das eine realistischere und immersivere Klanglandschaft ermöglicht.

Jetzt noch einmal in übersichtlicher, wo kann ich meinen Sound platzieren:

• 0D: Mono: Dieses Format bietet lediglich einen einzigen Audiokanal. Es ist nicht möglich, zusätzliche Rauminformationen hinzuzufügen. Der Ton wird einfach von einer einzigen Quelle wiedergegeben, die nichtmal weiß wo sie sich befindet.
• 1D: Stereo: Bei diesem Format werden zwei Kanäle verwendet, um den Ton nach links und rechts zu bewegen. Dies ermöglicht eine rudimentäre räumliche Wahrnehmung. Tiefe kann man lediglich künstlich mit Hall erzeugen.
• 2D: Surround: Typischerweise bei Formaten wie 5.1 oder 7.1 kann der Ton nicht nur vorne, sondern auch hinten im Raum platziert werden. Dadurch entsteht eine erweiterte räumliche Klanglandschaft auf einer Ebene.
• 3D Audio: Hierbei wird der Klang nicht nur horizontal, sondern auch vertikal im Raum bewegt. Dadurch kann man Klänge auch nach oben oder unten wandern lassen.

Bei all diesen Formaten guckt man aber stumpf nach vorne (wie beim Filmen). Man soll sich nicht einmal bewegen. Bei Musik ist nicht genau definiert, wohin wir schauen, aber eigentlich ist gar keine Interaktion angedacht. Es sind lineare Medien, bei denen man Start drückt und sie sind irgendwann zu Ende. Doch jetzt wird es erst spannend.

Freiheitsgrade, Degrees of Freedom (DoF)

Es gibt nämlich 3D Audio, da ist genau diese Bewegung gewünscht. Ich kann auch schonmal verraten, dass dort auch der Mehrwert von 3D Audio am größten ist, weil man sich auch schnell in 3D Welten wieder findet. Wenn man also über 3D Audio redet, reden meist alle über das was ich 0DoF nennen würde. Doch man sollte unterscheiden, was für eine Komplexität man überhaupt hat:

• 0DoF: Das ist womit wir eigentlich immer arbeiten, man sitzt in einem Sweetspot und guckt nach vorne. Eine komplizierte Bezeichnung für das was wir als Normalzustand kennen.
• 3DoF: Hier kann man seinen Blick drehen, etwa wie bei 360-Grad-Videos. Dies wird auch als Head-Tracking (Rotation) oder dynamische Kopferfassung bezeichnet.
• 6DoF: Dieses Konzept ist bereits aus 3D-Spielen bekannt, bei denen sich der Spieler oder die Spielerin zusätzlich durch einen 3D-Raum bewegt (Translation). Dabei wird nicht nur die Blickrichtung verändert, sondern auch die Position im Raum erfasst. In der ‚virtual reality‘ ist dies besonders wichtig, da es ein immersives Erlebnis ermöglicht.

Unterscheidung Lautsprecher und Kopfhörern

Ich bin Fan von Kopfhörern, jeder hat welche zu Hause und kann damit theoretisch in den Genuss von 3D Audio kommen.

Während man bei Lautsprechern eben ganz viele oder eine spezielle Soundbar benötigt. Vielleicht noch ein paar Gedanken zu dieser Unterscheidung, weil die meisten Tools wie die Dolby Atmos Production Suite immer erst an Lautsprecher und dann an Kopfhörer. Kopfhörer bieten jedoch eine einzigartige Möglichkeit, immersive media zu erleben, da sie den Hörer vollständig in die Klangwelt eintauchen lassen.

Im Tonstudio Betrieb gibt es immer mehr Tools, die diesen Klangeindruck simulieren können. Damit kann man quasi den Sound von seiner gewohnten Monitore virtuell mit auf Reisen nehmen. Oder sich akustisch einmal ins Abbey Road Studio setzen, in dem man nur das richtige Plugin installiert und die Augen zu macht. Das funktioniert im Pro-Audio Bereicht schon erstaunlich gut, ist aber für KonsumentInnen noch nicht so ganz zugänglich.

Wie man sich aber vorstellen kann ist es in der Realität gar nicht so einfach, wie einen Schalter zu drücken auf dem “Binaural” steht und man hat automatisch ein tolles Kino Erlebnis auf dem Ohr. In der Umsetzung hat man wahnsinnig viele Paramater und Probleme den räumlichen Eindruck mal eben von virtuellen Audioobjekten auf zweikanaligen Stereo-Sound umzuwandeln.

Objekt-basiertes Audio

Das ist aber eigentlich das Prinzip von objekt-basiertem Audio, so nennt sich die Technologie hinter Dolby Atmos (AC-4), Fraunhofers MPEG-H (bzw. Sony 360 Reality Audio) und Auro 3D sei an der Stelle als Vorreiter erwähnt.

Idealerweise macht man einen mehrkanaligen Mix, der dann automatisch auf jedem Gerät gut klingt. Egal ob Smartphone, TV, Soundbar oder Kopfhörer, man ist unabhängig von irgendwelchen Audiokänlen. Beim Abspielen werden die Produktionen in Echtzeit für das endsprechende Medium optimiert.

Das ist aber auch einer der Gründe, wieso sich die Verbreitung von Atmos und Co noch nicht so überzeugend auf dem Massenmarkt durchgesetzt hat. Man muss immer gewisse Kompromisse eingehen und am Ende entscheiden die Mischungen, wie gut der Raumklang zu Stande kommt.

Es kristallisieren sich aber Szenarien heraus: So hatte ich bei Dolby Atmos Demos in einem Mercedes bei einem Hiphop Song (und das ist gar nicht mein Genre) erstaunlich viel Spaß.

Stand heute bin ich aber noch der Überzeugung, dass es sich lohnt auch wirklich für Kopfhörer zu Mischen und nicht darauf hoffen, dass das alles schon irgendwie OK durch den Renderer klingen wird. Kopfhörer haben nämlich einen Vorteil, den Lautsprecher nicht haben, eine sogenannte Im-Kopf-Lokalisation. Dennoch wird versucht sie zu eliminieren, zu Unrecht wie ich meine.

Im-Lokalisation ist kein Feind

Beim Hören über Kopfhörer wird Mono und Stereo meist im Kopf wahrgenommen. Stereo ermöglicht zwar eine Bewegung des Tons zwischen links und rechts, jedoch fehlt die Möglichkeit, den Klang räumlich vorne, hinten, oben und unten zu differenzieren. Binaurales Stereo löst dieses Problem und man hat das Gefühl die Töne geschehen um einen herum, nicht nur auf Ohren, bzw. im Kopf.

Klingt als kommen wir damit unserem natürlichen Hörerlebnis näher. Denn Lautsprecher können wir nie als Im-Kopf-Lokalisation wahrnehmen, weil sie ja nicht genau auf unseren Ohren sitzen. Dennoch bietet uns dieses Psychoakustische Phänomen einen entscheidenden Vorteil, je komplexer wir uns in der Welt von 3D Audio bewegen.

Klingt alles noch etwas abstrakt? Keine Bange, daher gehen wir jetzt in die Praxis.

Musik und 3D Sound

Musik in 3D-Sound ist ein aufregendes neues Format, das die Art und Weise, wie wir Musik hören und erleben, revolutionieren soll. Eine der führenden Technologien in diesem Bereich ist Dolby Atmos. Ursprünglich für den Kinomarkt entwickelt, hat Dolby Atmos nun auch die Musikproduktion erobert und bietet völlig neue Möglichkeiten für Künstler und Produzenten.

Dolby Atmos ist ein objektbasiertes System, das es ermöglicht, Klangobjekte in einem dreidimensionalen Raum zu positionieren. Dies bedeutet, dass jedes Instrument, jede Stimme und jeder Effekt präzise im Raum platziert werden kann, wodurch eine immersive Klanglandschaft entsteht.

Im Gegensatz zu traditionellen 2-Kanal-Stereo-Mischungen, bei denen der Klang nur von links und rechts kommt, bietet Dolby Atmos eine vielschichtige und räumliche Klangwiedergabe.

Die Musikindustrie versucht zunehmend, die Einschränkungen von Stereo-Mischungen hinter sich zu lassen und die Vorteile von 3D-Sound zu nutzen. Mit Dolby Atmos können Künstler ihre Musik auf eine Weise präsentieren, die den Hörer mitten ins Geschehen versetzt. Man hat das Gefühl, als wäre man live dabei, umgeben von den Klängen und Nuancen der Musik.

Ein weiterer Vorteil von Dolby Atmos in der Musikproduktion ist die Möglichkeit, den Klang an verschiedene Wiedergabegeräte anzupassen. Egal ob man die Musik über Kopfhörer, eine Soundbar oder ein Heimkinosystem hört – Dolby Atmos sorgt dafür, dass die Klangqualität stets optimal ist. Dies eröffnet völlig neue kreative Möglichkeiten und setzt neue Maßstäbe für die Musikproduktion.

0 DoF – Normalität neu gedacht

0 Degrees of Freedom (0DoF) in der Welt des 3D-Audios ist für uns eigentlich recht normal, da diese üblicherweise eine festgelegte Richtung oder Sitzposition für die ZuhörerInnen impliziert. Anders ausgedrückt, bedeutet dies, dass der Hörer in Bezug auf den Klanginhalt keine zusätzlichen Bewegungsfreiheiten hat und in einer festen Position verharrt.

Worauf ich aber vor allem hinauswill: Es ist nicht nur so, dass die Leute sich mit dem Inhalt nicht bewegen können – sie sollen es genau genommen nicht. Hier lautet das Stichwort “Einhüllung”, da es eher darum geht, eine immersive Klangkulisse zu gestalten, die die ZuhörerInnen im wahrsten Sinne auf der Couch fesselt.

Diese immersive soundscapes schaffen eine Umgebung, die den Hörer vollständig umgibt und ein tiefes Eintauchen in die Klangwelt ermöglicht.

Anwendungen mit ihren Vor- und Nachteilen

Anwendungen von 0DoF 3D Audio sind in verschiedenen Alltags-Bereichen zu finden, darunter Kino, Musik, Podcasts aber auch bei Live-Beschallung. Beim Film ermöglicht diese Art von 3D Audio eine lineare Audioerfahrung. Der Ton kann räumlich sein, aber die Leute sollen ja gerade nicht von Geräuschen hinter ihnen abgelenkt werden.

Ob da jetzt ein Hubschrauber von über einem drüber fliegt, ist nett, ändert aber nichts an der Story. Der Inhalt würde eigentlich auch in Stereo funktionieren, oder Mono. Hier hat der mehrkanalige Ton von der Firma Dolby seinen Ursprung ist auch wenn ich kritisch bin, macht es schon Spaß das Gefühl zu haben „im Film zu sitzen“.

Nun kam jemand auf die Idee diese Audiotechnologie auch für das Thema Musikproduktion zu nutzen. Es wird beworben mit Livesound, Immersion, den Musikern noch näher zu sein. Aber meist bekommen die gemischten Titel eine Räumlichkeit, die nicht jedem Genre guttut. Außerdem geht dabei meist der Druck verloren, den man vom radiotauglichen Stereo sound vermisst.

Legitimer Vorteil ist aber, dass man bei der Mischung weniger Kompromisse eingehen muss. Statt nur Links und Rechts kann man die Objekte nun auch anhand der Y- oder Z-Achse bewegen. Dadurch kann unser Gehirn sie differenzierter Wahrnehmen und muss ggf. weniger mit Tiefenstaffelung und EQs arbeiten.

Nun soll das Ganze auch für Podcasts verwendet werden, aber da rollt es selbst mir die Fußnägel hoch. Typische Gesprächspodcasts sind als Stereo-Mischungen voll in Ordnung. Meist reicht sogar mono. Man kann diesem Audioformat nicht einfach künstlich eine Räumlichkeit hinzufügen und erwarten, dass es dann immersives Audio ist.

Ebenfalls in seiner Findungsphase ist gerade 3D Audio für den Live-Einsatz. Es gibt bereits eine Auswahl an Anbietern, die nun ihre eigene Lösung präsentieren. Wieso sollte man aber überhaupt Töne hinter sich hören, wenn die Bühne vor einem ist? Gar nicht!

Es geht im ersten Schritt eher darum die Herausforderungen, um instabile Phantomschallquellen mit mehreren Line Arrays zu lösen. Im zweiten Schritt kann man dann immer noch wild werden und der Live-Betrieb durchaus dazu ein.

Für mich ist also hier bei 0DoF gar nicht so viel Mehrwert zu finden. Die Stärke von objektbasiertem Audio steckt für mich hier v.a. in der Personalisierbarkeit. Wie cool wäre es etwa Fußball zu schauen und den Kommentartor/In stumm schalten zu können, während man von der Stadionatmosphäre in 3D eingehüllt ist?

In dieser Technologie sehe ich absolut Potenzial und die Hoffnung, dass MPEG-H hier das Rennen macht, weil der Dolby Atmos Renderer in der Funktionalität stark eingeschränkt ist.

Benötigte Investitionen für 3D Audio Anfänger

Bei der Umsetzung von 0 Degrees of Freedom (0DoF) 3D Audio zeigen sich Unterschiede in den benötigten Investitionen je nach Wiedergabemethode. Für den Einstieg über Kopfhörer ist die Einstiegshürde niedrig. Egal ob Over-Ear, In-Ear, Hauptsache Stereo und je höherwertiger, desto besser.

Diese Ohrhörer müssen nicht unbedingt speziell für 3D-Audio entwickelt worden sein. Es gibt auch genug kostenlose Plugins wie DearVR Micro, für rein binaurales Arbeiten. Binaural Audio ermöglicht es, ein immersives Klangerlebnis zu schaffen, das besonders über Kopfhörer zur Geltung kommt. Wer sich in mehrkanaliges Audio einarbeiten will, da lauten meine Empfehlungen IEM Ambisonics Plug-in Suite mit der DAW Reaper.

Aber selbst Dolby verlangt nicht mehr zigtausende Euro an Soft- und Hardware. Die Dolby Atmos Production Suite ist für wenige hundert Euro zu erwerben und in Logic mittlerweile standardmäßig implementiert. Sony 360 Reality Audio kostet ähnlich viel, während hier die MPEG-H Authoring Suite zwar nicht für Musik optimiert wurde, aber mehr Funktionalität liefert und sogar kostenlos ist.

Im Gegensatz dazu erfordert die Implementierung von 0DoF 3D Audio über Lautsprecher mehr Hardware und eine sorgfältigere Konfiguration. Für eine präzise Wiedergabe ist die Einrichtung eines akustisch optimierten Raums mit mehreren Lautsprechern, Subwoofer, Bass-Fallen und akustischen Behandlungen notwendig. Mit Interface, Kabeln etc. ist man da schnell bei einer fünfstelligen Summe.

Die Hoffnung der Tontechniker ist meist diese Investition zu tätigen, um dann höhere Preise für ihre Dienstleistung und Studio verlangen zu können. Die Realität ist leider: Man kann sich nicht einfach Lautsprecher an die Decke montieren und erwarten, dass KundInnen dann mit Geld in der Hand auf einen zugeflogen kommen.

3DoF – viel gehört, selten gut gemacht

Bei 3DoF kann der Hörer nicht nur die Richtung des Tons wahrnehmen, sondern auch einen gewissen Grad an Bewegungsfreiheit erleben. Diese Technologie erlaubt es, dass der Hörer seinen Blickwinkel oder seine Position ändern kann, um das Klangerlebnis zu beeinflussen. Durch die Integration von interactive audio wird das Erlebnis noch immersiver. Die Anwendungen sind meistens aber weiterhin linear mit fixem Start- und Endpunkt.

Anwendungen mit Vor- und Nachteilen

3DoF 3D Audio wird häufig in 360-Grad-Video-Inhalten eingesetzt, wo das Umgucken und Umhören in der Umgebung ausdrücklich erwünscht ist. Hier wird oft auch über Virtual Reality geredet, doch dazu kommen wir erst bei den 6 Freiheitsgraden. Das bedeutet, dass sich die Wiedergabe des Sounds mit der Bewegung des Hörers in Echtzeit anpasst und zusätzliche Immersion und Interaktivität schafft.

Das bringt uns Menschen einen der Vorteile nun Vorne von Hinten zu unterscheiden zu können. Ist ein Objekt z.B. links vor uns, hat es genau die gleiche Lautstärke und Laufzeit, wie wenn es links hinter uns ist. Lediglich unsere Ohrenform kann bei der Entscheidung helfen. Viel effektiver ist aber die leichte Kopfbewegung und unser Gehirn weiß sofort, wo sich welcher Sound im Geschehen befindet.

Kann man das nicht jetzt schon mit Apple Produkten machen? Ja, dafür etwa auf Apple Music gehen und muss auf den Airpods 3D Sound aktivieren. Das riesige Problem: Die Inhalte wurden nicht mit der Intention gemischt, dass sich die Hörerinnen überhaupt umdrehen.

Alles soll 3D sein, genau wie bei Lautsprechern. Doch es würde total Sinn machen die Möglichkeit zu haben Objekte auch head-locked zu machen, denn aktuell kreist einem meist der Sänger, und die Snare aus dem Center sofort um den Kopf. Diese obligatorische Stereo-Spur ist im 360VR Bereich seit Jahren Standard. Im Bereich „immersive Musikproduktion“ redet aber niemand drüber.

Laut Dolby und Co soll man brav nach „vorne“ gucken. Daher mache ich die Unterscheidung zwischen 0DoF und 3Dof, weil man theoretisch ja auch 5.1 Surround Sound oder Stereo mit Headtracking hören kann. Problem ist aber, dass auch dort klassisch sehr viel in den Center und vorne gemischt wird, während hinten recht wenig passiert. Wir erinnern uns: die Leute sollen sich nicht umdrehen, aber dadurch wird 3D Audio eben recht wenig genutzt.

Das Pendant auf Lautsprecherseite dazu hört man in einem Kuppel-Kino. Meist füllen Sie aber keine Kugel aus, sondern auf Höhenebene nur eine Halbkugel. Außerdem wird auf Horizontalebene meist nicht 360° sondern „nur“ 270° abgedeckt. Durch die Bestuhlung kann man sich sowieso nicht nach hinten drehen. Doch spätestens seit der Sphere in Las Vegas bekommt das Thema trotz immenser technischer Anforderungen mehr Aufwind.

Investition für Head-Tracking

Wer sich 360 Videos mit 3D Audio anhören möchte, wird da schon kostenlos auf YouTube und Facebook, oder natürlich meiner Homepage, fündig. Die dazugehörigen Plugins wie die FB360 Workstation gab es mal kostenlos, wird aber aktuell nicht mehr unterstützt. Zugegeben, der Hype um die kugelförmigen Videos ist vorbei, hat für mich aber noch absolut seine Daseinsberechtigung.

Viel zu selten wurde das Potenzial richtig genutzt und Dinge getan, die auch als normales 16:9 Video funktioniert hätten. Außerdem macht so ein Erlebnis auf einem Head-Mounted Display erst richtig Spaß. Hier gab es mit der Oculus Go ein sehr erschwingliches Gerät für 200€ und nun mit Konkurrenz aus China mit der Pico G3. Solche Geräte werden eben mit 3DoF bezeichnet, weil man seinen Kopf zwar in VR bewegen kann – den Körper aber nicht fortbewegen kann.

Die dynamische Kopferfassung gibt es auch ohne Videoinhalte. Dazu ist dann aber wirklich ein spezielles Paar Kopfhörer oder Hardware nötig, um die Beschleunigung zu erfassen. Apple hat hier wirklich vorbildlich umgesetzt. Man versteht sofort, ob man überhaupt mehrkanaligen Content hört oder nur Stereomischungen mit mehr Räumlichkeit hochgemischt werden.

Das Head-Tracking ist cool, aber aus besagten Gründen wird leider nicht die Frage beantwortet: Ist der Inhalt dafür überhaupt geeignet?

6DoF – die Königsdisziplin im Bereich 3D Audio

6 Degrees of Freedom (6DoF) 3D Audio bietet die höchste räumliche Freiheit und Interaktivität im 3D-Audio-Spektrum. Diese Dimension ermöglicht es dem Hörer, sich frei im dreidimensionalen Klangraum zu bewegen und verschiedene Klangperspektiven zu erleben – weg vom Sweetspot. Dies ist ein wesentlicher Bestandteil von spatial computing, das die Vorteile von 6DoF voll ausschöpft.

Innerhalb des 6DoF-Konzepts hat man nicht mehr ein lineares File, das einfach abgespielt wird. Stattdessen liefert man mehrere einzelne Sounds an, die entweder geloopt werden oder mit einer Interaktion ausgelöst werden. Hier findet man sich schnell in Game-Engines wie Unity oder Unreal wieder, die aber auf Audioebene recht rudimentär ausgestattet sind. Daher wird bei solchen Projekten meist eine Middleware wie WWise oder FMOD angebunden.

Anwendungen für Games Audio

Dieser Grad der Freiheit eröffnet neue Komplexitätsstufe für immersives Audio, insbesondere in Virtual-Reality-Anwendungen und interaktiven audiovisuellen Umgebungen. Oder einfach ausgedrückt kennen die meisten das Konzept einfach aus dem Gaming.

Hier ist aber mal wieder der Content zu beachten. Ein zweidimensionales Strategie-Spiel kann von den Vorteilen von immersivem Audio bei weitem nicht so gut profitieren wie ein Egoshooter in einer 3D-Welt. GamerInnen wissen, wie wichtig es ist seinen Gegner nicht nur Rechtzeitig zu sehen – sondern schon vorher zu hören.

Ähnlich ist es bei diesen immersiven Medien wie VR, AR oder wie es neuerdings genannt wird Metaverse bzw. Spatial Computing. Hängen wir uns nicht an den Begrifflichkeiten auf, sondern daran, dass hier die Audioproduktion wesentlich komplexer ist. Man hat ja auch nun wesentlich mehr Parameter, um seinen Sound anzupassen.

Man muss nun etwa einstellen, mit welcher Lautstärke das Audioobjekt leiser wird, wenn ich mich von diesem entferne. In welchem Winkel strahlt es ab, wenn ich mich wegdrehe? Habe ich Abschattung (Occlusion), wenn uns eine Mauer trennt? etc. Game engines bieten hier die notwendigen Werkzeuge, um diese komplexen Audioeinstellungen zu realisieren und somit ein immersives Erlebnis zu schaffen.

Investition für immersives, interaktives Audio

Selbst wenn hier meist nur mit Kopfhörern gearbeitet birgt dieses Feld spezifische Kosten und Investitionen. Ein wesentlicher Aspekt ist die Hardware: leistungsfähige Rechner und geeignete Virtual-Reality-Headsets sind unerlässlich. Als Mac-Nutzer tauchten bestimmte Kompatibilitätsprobleme für mich auf, weshalb ich zusätzlich ein Windows-basiertes Systemen fahren muss.

Die Kosten für Virtual-Reality-Brillen sind zwar stark gesunken aber die Technik der HMDs altert auch sehr schnell. Die fortlaufende Aktualisierung von Tools und Software ist Stand heute ebenfalls ein recht lästiger Kostenfaktor.

Weiterhin erfordert die Implementierung von 6DoF 3D Audio in der Regel ein gewisses Verständnis für Programmierung und Entwicklungsarbeit. Investitionen in Fortbildungen und Schulungen sind erforderlich, um das erforderliche Fachwissen als Tonmeister zu erlangen.

Die Zukunft des Sounds

Die Zukunft des Sounds ist zweifellos 3D-Audio, und Dolby Atmos spielt dabei eine zentrale Rolle. Diese innovative Audio-Technologie hat das Potenzial, die Art und Weise, wie wir Filme, Musik und Spiele erleben, grundlegend zu verändern. Durch die Schaffung einer dreidimensionalen Klangumgebung ermöglicht Dolby Atmos ein immersives und realistisches Klangerlebnis, das weit über die Möglichkeiten traditioneller Stereo- und Surround-Sound-Systeme hinausgeht.

In der Zukunft könnten wir noch mehr Fortschritte und Innovationen im Bereich 3D-Audio erwarten. Die Technologie wird ständig weiterentwickelt, um noch präzisere und realistischere Klangwiedergaben zu ermöglichen. Dies könnte beispielsweise durch die Integration von Künstlicher Intelligenz und maschinellem Lernen geschehen, um den Klang noch besser an die individuellen Vorlieben und die Umgebung des Zuhörers anzupassen.

Auch die Anwendungsmöglichkeiten von 3D-Audio werden sich weiter ausdehnen. Neben Filmen, Musik und Spielen könnten auch andere Bereiche wie Virtual Reality, Augmented Reality und interaktive Medien von den Vorteilen von 3D-Audio profitieren. Die Möglichkeiten sind nahezu unbegrenzt, und es ist spannend zu sehen, wie sich die Technologie weiterentwickeln wird.

Dolby Atmos ist ein wichtiger Teil dieser Zukunft und wird zweifellos weiterhin eine führende Rolle im Bereich 3D-Audio spielen. Die Technologie bietet eine immersive und realistische Klangwiedergabe, die das Potenzial hat, unsere Hörerfahrung in den kommenden Jahren zu revolutionieren. Die Zukunft des Sounds ist 3D-Audio, und wir stehen erst am Anfang dieser aufregenden Reise.

Fazit Martins 3D Audio Matrix

Insgesamt bietet 3D Audio neues Licht in eine faszinierende Welt akustischer Erlebnisse, die weit über die herkömmlichen Soundformate hinausgeht. Von Mono bis über Dolby Atmos hinaus eröffnet diese Technologie neue Möglichkeiten, die unsere Hörerfahrung in Musik, Heimkino und Gaming revolutionieren können.

Für Einsteiger ist der Zugang über Kopfhörer unkomplizierter und kostengünstiger im Vergleich zu Lautsprechersysteme. Obwohl die Anfangsinvestitionen variieren, ist die Fortbildung in diesem Bereich unerlässlich, um die volle Bandbreite der 3D Audio-Produktion zu erfassen.

Mein Videokurs bietet hierfür eine optimale Plattform, um fundiertes Wissen und praktische Fähigkeiten zu erlangen, also bewirb dich gerne auf einen Platz. Auf meinem Blog findest du bereits etliche Inhalte und halte die Community auf dem Laufendem.

Die ständige Weiterentwicklung und Integration von 3D Audio in diverse Bereiche verspricht eine aufregende Zukunft, die gerade erst angefangen hat. Besonders die Rolle von artificial intelligence wird dabei immer bedeutender, da sie neue Möglichkeiten für die Klanggestaltung und -wahrnehmung eröffnet. Das waren die Basics, also lass mich gerne wissen, wozu du mehr erfahren möchtest?