Test Demo Dummy für 360 Videos

Wer kennt der Unterschied zwischen Head-Locked und nicht Head-Locked? Oder welche Vorteile ergeben sich durch den Einsatz der Head-Locked Methode und Ambisonics? In diesem Beitrag erfährst du es!

Genau genommen liegt hier der Fokus auf dem ausprobieren. Es ist manchmal nämlich gar nicht so einfach alles auf einer VR Brille zum Laufen zu bekommen. Meine Übersicht der 360 Video Player lässt erahnen dass der Teufel im Detail steckt.

Bei manchen Videos ist einfach nicht so eindeutig, ob der Ton jetzt auch wirklich 3D Audio ist oder nicht. Daher habe ich ein Dummy Video erstellt, um dieses einwandfrei herausfinden zukönnen. Das Video ist also nicht sonderlich hübsch, aber erfüllt seinen Zweck. Unten befinden sich die Links zum Download und selber ausprobieren.

Ich freue mich über Verbesserungsvorschläge, weil es nun schon mehrere Versionen bei mir intern gibt. Aber bei dem Vergleich headtracking vs. head-locked kann mna bestimmt et was verbessern.

Was ist Head-Locked Audio?

Vereinfacht gesagt könnte man sagen, dass unsere gutes altes Stereo bei 360 Videos ein Head-Locked Audio ist. Man spricht aber erst in Kombination mit Spatial Audio auch wirklich von Head-Locked.

Bei dem Head-Locked Verfahren werden die Audiosignale an diskrete Kanäle geroutet und werden nicht in der Szene platziert. Bei Stereo eben Kanal 1 für das linke Ohre und Kanal 2 für das Rechte.

Somit bewegt sich der Audioinhalt mit dem Hörer mit, d.h. wenn der Zuhörer den Kopf nach links dreht, dreht sich der Sound nach links mit. Man muss also immer etwas aufpassen, wie man das formuliert. Dreht sich der Sound mit, bleibt er ja eigentlich unverändert, er ist von der Kopf-Bewegung unabhängig.

Das Head-Locked Verfahren eignet sich besonders für Voiceover oder noch besser für den Einsatz von Musik. Meist liegt Musik nur als Stereo-Audio vor. Es gibt aber wesentlich bessere Varianten, um Musik in 360 Videos einzubinden. Ich persönlich vermeide daher die Head-Locked Spur aus verschiedensten Gründen.

Ambisonics

Hier passt sich per Head-Tracking der Klang in Echtzeit an die Kopfbewegung an. Man spricht auch gerne von scene-based. Die Schallquellen sind gedanklich im Raum verankert. Dreht man also seinen Kopf, bleiben die Töne wo sie sind im Raum, es ändert sich aber der Klancharakter für unsere Ohren.

Es gibt mehrere 3D Audio Formate die dies ermöglichen, wie ich in den Pros und Contras für 360 Videos bereits erläutert habe. In der Welt von VR Videos hat sich Ambisonics als quasi Standard etabliert.

Über Ambisnonics habe ich bereits einiges in meinem Blog geschrieben. Der Beitrag: Ambisonics für Virtual Reality und 360° Schallfeld beschreibt die Vor- und Nachteile und gibt einen kleinen Überblick über den Arbeitsablauf. Ob es erste Ordnung oder höhere, sei für diesen Test einmal nicht zu wichtig..

Test Dummy

Der Test Dummy ist in zwei Formaten online verfügbar, zum einen auf Facebook und zum anderen auf Youtube.

Facebook360

Youtube VR

Achtung: Auf Youtube läuft das Video nur mit dem Firefox Browser.

Download

Wer möchte, kann sich das Video auch downloaden und auf das VR Headset laden.

Downloadlink: Dateidownload

Script

Um sich den Aufbau und Ablauf des Dummys besser vorstellen zu können wird nachfolgend das Script vorgestellt. Auch hier sind Verbesserungsvorschläge erwünscht. Es richtet sich an Entwickler und Einsteiger im Bereich Spatial Audio. Da ich immer wieder erlebe, dass der Unterschied zwischen head-locked und head-tracked nicht klar ist.

Ambisonics: Stimme Front

Ambisonics Ton ist bei 0° Azimuth und 0° Elevation zu hören, also das was bei Lautsprechern Center wäre. Time: ca 0-15 Sekunden

SPEAKER: “Hello and welcome to the demo test for 360 videos, when you turn your head you can hear the audio content still coming from 0°. Move your head to the left and you will hear the voice rotating to the right. This is to simulate the head-tracking.”

Ambisonics: Stimme rotiert links/rechts

Ambisonics Ton rotiert um den Kopf, die Nutzer sollen den Kopf stille halten. Rotation im Uhrzeigersinn um die Azimut Achse. Time: ca 0-15 Sekunden

SPEAKER: “Move your head back 0°. As we go along, we will mix in music and let the audio content circle around your head. The rotation happens horizontally, without any height information.

Ambisonics: in Kopf

Es wird nur noch der erste Kanal von Ambisonics genutzt.

SPEAKER: “Let’s forget about 3D Audio for a moment. I am now a voice inside of your head. You can rotate your head, but my voice will stay the same. It’s monophonic. This is useful to make users understand that a voice is not part of the scene, called non-diegetic. This is used voice-overs like narrators, that can’t are invisible, but tell you more about the scene”

Head-Locked: Stereo

Es ist Musik zu hören, die offensichtlich Stereo ist. Time: SPEAKER: “Let me play back my favorite record. What you just heard is also called head-locked audio. Move your head and you will realize, that music moves with you – it is not placed in the scene. Head-Locked audio is an optional stereo stream, that can be used for voice-over or even better: for stereo music.”

Ton kommt von links.

SPEAKER: “We are not limited to mono, so I can sit next to your ear. Now I’m on the left and whisper to you

Ton kommt von rechts.

SPEAKER: “Or I can jump to the right and talk to you. Keep moving your head and I will always stay on the right.”

Kombination: Ambisonics und Head-Locked 1

Es ist wieder eine Stimme im Center zu hören, die Musik hört man als Head-Locked.

SPEAKER: “Now that you learned the difference between diegetic and non-diegetic. Or: head-tracked audio versus head-locked audio. Let’s try both at the same time. You can hear music that is not part of the scene as background music – there it is head-locked. While you can hear my voice as part of the scene as if a person is talking to you.”

Kombination: Ambisonics und Head-Locked 2

Jetzt andersherum: Stimme im Kopf und Musik in der Szene.

SPEAKER: “Now let’s do it the other way round: I’m not a voice inside your head, so I’m not part of the scene. But you can localize the music from the front. So move your head and now the music will move around your head, while my voice is independent from where you are looking at. This is typical for music scenes where you can hear a musician play, while a recording of an interview is played back.”

Outro: Abmoderation des 360 Videos Tests.

SPEAKER: “This was the demo test for 360 videos. We hope you learned about the potential of head-tracked and head-locked audio. But this is just the beginning, contact Martin Rieger and create next-level experiences.”

Wie geht es weiter?

Jetzt wo der Soundcheck erfolgt ist und du eine Vorstellung von Ambisonics und weiteren Virtual Reality Audio Formaten hast, geht es darum qualitativ hochwertigen Content zu erzeugen. Dabei helfe ich dir gerne, kontaktiere mich doch einfach: