360-Grad Videos für Virtual Reality Plattformen und VR-Player Apps
Inhalt
Es gibt immer mehr Möglichkeiten, eine immersive Audio-Experience zu hören.
Weil es aber noch keinen einheitlichen Standart gibt, wollte ich eine Übersicht schaffen, welche Plattform auf welchem Gerät mit welchem Videoplayer welches Spatial Audio Format unterstützt.
Wer mehr über die Formate wissen möchte kann hier meinen Artikel über die Pros und Contras lesen.
Aktualisierungen
Update 2017/09:
- YouTube unterstützt jetzt iOS-Geräte für räumliche Audiowiedergabe
- YouTube ermöglicht auch stereoskopische VR180-Videos
- Die Desktop Version von Oculus Video für Oculus Rift unterstützt jetzt das „Two Big Ears“ Format.
Update 2017/10:
- HTC Vive Cinema unterstützt eine Vielzahl von Surround-Sound-Formaten!
Update 2017/11:
- GoPro VR Player (früher: Kolor 360° Video Player) unterstützt jetzt Spatial Audio!
- Mach1 Spatial Audio wurde zu SamsungVR für GearVR und Android hinzugefügt.
Update 2018/01:
- VideoLAN VLC Media Player (VLC 3.0 Vetinari) unterstützt jetzt Ambisonics höherer Ordnung
Update 2018/04:
- Windows Mixed Reality Headsets (z.B. Samsung Odyssey) werden von Vive Cinema über Viveport unterstützt. Dank an das GRID Lab der Ohio University. Vive Cinema wird auch von Oculus unterstützt.
Update 2018/05:
- Samsung Gallery für GearVR behauptet, „3D-Raumklang“ zu haben. Man bekommt ein Gefühl von Head-Tracking-Sound, aber selbst wenn man eine Stereoanlage lädt, werden zwei Klangobjekte im Raum erzeugt, die selten mit dem Visuellen übereinstimmen.
- Oculus Video Player für GearVR sowohl Two Big Ears als auch ambiX
Update 2018/06:
- Oculus Go hinzugefügt. Oculus Video Player und Oculus Gallery ermöglichen es, Videos, die für YouTubeVR und FacebookVR erstellt wurden, vor dem Hochladen offline als mp4 anzusehen. SamsungVR Video funktioniert ähnlich wie GearVR. Danke an Angelo Farina für das Testen.
Update 2018/11:
- YouTube unterstützt jetzt eine optionale Head-Locked Stereo-Spur, ähnlich wie Facebook, aber auf Kanal 5+6 gemappt, während Kanal 1-4 weiterhin First Order Ambisonic (FOA), Ambix
Update 2019/04:
- Auf vielfachen Wunsch habe ich eine Überschrift für iOS-Geräte, wie iPhone, iPad und iMac, hinzugefügt. Außerdem: VeeR VR für iOS-Geräte hinzugefügt.
Update 2019/10:
- JauntVR und LittlstarVR, die Dolby Atmos VR unterstützen, sind jetzt als offline markiert.
Update 2020:
- Unterstützung für Oculus Quest und Oculus Quest 2 im Bereich Oculus Go hinzugefügt.
Update 2021/03:
- Pico Interactive unterstützt derzeit kein Spatial Audio. Die Wiedergabe von mkv ist nicht flüssig. Ich stehe daher in Kontakt mit den Entwicklern. Unterstützung für Pico G2 4k, Pico Neo 2 und Pico Neo 3 wird noch angekündigt.
Update 2024/03
- Meta Quest 3: Funktioniert genauso wie Meta Quest 2 und Oculus Quest, ABER Meta hat mit dem Update von v62 auf v63 irgend etwas kaputt gemacht, also empfehle ich nicht zu updaten.
- Pico G3: Obwohl ich große Hoffnungen hatte, zeigte es bei den von mir getesteten Dateien keine Anzeichen von Spatial Audio. Aber es hat eine Funktion zum Upmixen von Stereo, genau wie Apples Stereo-zu-3D Funktion, das für 360-Videos nutzlos ist.
- Apple Vision Pro: Ich konnte eine Dolby Atmos-Datei mit der Galerie abspielen. Auch die mit den Geräten aufgenommenen Spatial Videos enthalten mehrere Tonspuren. Mehr dazu demnächst
Ab hier auf Englisch, da das Übersetzen sonst unnötig viel Zeit frisst.
If you know about any updates, please let me know:
write me a message
Online Video Platform
| Platform | Format | Description | Device | Source |
|---|---|---|---|---|
| Samsung VR | Ambix, 5.1, Quadraphonic, Quad-Binaural, Mach1 |
4 channel Ambisonics, 6 speaker setup, quad-layout at 0°, 90°, 180° and 270°, isotropic spatial: 8×1 |
Android App, GearVR Oculus App, Desktop Internet Browser | https://samsungvr.com/portal/content/content_specs |
| YouTube | Ambix | 4 channels, First Order Ambisonic (FOA) Now with optional Head-Locked Stereo track | Works on Android 4.2 and Chrome Browser for desktop, Update: Now also iOS | https://support.google.com/youtube/answer/6395969?co=GENIE.Platform%3DDesktop&hl=en |
| Two Big Ears | 8 channels, Hybrid Higher Order Ambisonics + optional stereo track for static sounds | works on pretty much all devices | https://facebookincubator.github.io/facebook-360-spatial-workstation/ | |
| JauntVR | Dolby Atmos VR, Ambisonics | “support Dolby Atmos, as well as all other ambisonic, surround and standard audio formats.“ | Android App, GearVR Oculus App, Desktop Internet Browser | https://www.jauntvr.com/creators/ is down unfortunately |
| LittlstarVR | Dolby Atmos VR | 6 channel EC3 transcoded Atmos Printmaster File (.atmos) | Android App, GearVR Oculus App, Desktop Internet Browser | -> Content Publishers https://www.dolby.com/us/en/professional/content-creation/vr.html is down unfortunately |
| Vimeo | no spatial audio yet | currently no statement about it | – | https://join.vimeo.com/360/ |
Apps for Android devices that work offline
| Platform | Format | Description | Device | Source |
|---|---|---|---|---|
| Jump Inspector | Ambix 4 & 16 channels |
supports the same format as YouTube FOA (first-order ambisonic) and additional a support for TOA (third order ambisonic) with 16 audio tracks | Android Smartphone, check link -> | https://support.google.com/jump/answer/6382788?hl=en |
| Samsung VR | Ambix, 5.1, Quadraphonic, Quad-Binaural, Mach1 |
same as stated above, but works also without a GearVR | GearVR Oculus App, Desktop Internet Browser | https://samsungvr.com/portal/content/content_specs |
Samsung GearVR (Oculus Store)
| Platform | Format | Description | Source |
|---|---|---|---|
| Oculus Video Player | Two Big Ears, Ambix | YouTube FOA works same as for uploading to YouTube. For Facebook: mp4 is not supported, but experimental MKV-Opus for tbe Before: Ambix and .mkv-container. Before: FuMa |
https://facebookincubator.github.io/facebook-360-spatial-workstation/KB/AddSpatialAudioToOculusVideo.html?highlight=oculus%20video |
| Samsung VR | see above | see above | https://samsungvr.com/portal/content/content_specs |
| Samsung Gallery | fake spatial sound | when playing a video with a plain stereo soundtrack, it gets spatialized as two point sources which are head-tracked. Can be a nice effect but is mostly confusing | https://www.oculus.com/experiences/gear-vr/1113617725394318/ |
| JauntVR | Dolby Atmos VR, Ambisonics | see above | https://www.jauntvr.com/creators/ is down unfortunately |
Oculus Go, Oculus Quest, Oculus Quest 2
Oculus / Meta Quest likes to rename the apps (and company, lol). So the video player that was installed natively used to be called Oculus Video Player, or Oculus Gallery. It’s currently named Oculus TV, where you can access your internal storage. Like that you can watch 360 videos with the spatial audio formats listed above.
| Platform | Format | Description | Source |
|---|---|---|---|
| Oculus Video Player | Two Big Ears, Ambix | see above, but allows mp4s with tbe-format. So Side-Loading of YouTube and Facebook Videos now possible inside one app | https://www.oculus.com/experiences/go/838122072929207/ |
| Oculus Gallery | see Oculus Video Player | works similar to Oculus Video Player | https://www.oculus.com/experiences/go/1783939024969036/ |
| Samsung VR Videos | see above | see above | https://www.oculus.com/experiences/go/837075486363650/ |
| SKYBOX VR Video Player | spatial audio not supported | / | https://www.oculus.com/experiences/go/1256687334386627/ |
iOS Devices (iPad, iPhone, iMac, Macbook etc.)
Since Apple is lagging a bit behind, I want to show some possibilities to play back 360° Video with spatial sound on those devices due to popular request
| Platform | Format | Description | Source |
|---|---|---|---|
| FB360 Two Big Ears | 8+2 channels, so above. Use Chrome Browser or Firefox on desktop, Safari usually not supported. Use dedicated Facebook App on iPhone or iPad | https://facebookincubator.github.io/facebook-360-spatial-workstation/ | |
| YouTube | Ambix, FOA | Update: Now also iOS. Use Chrome Browser or Firefox on desktop, Safari usually not supported. Use dedicated Facebook App on iPhone or iPad | https://support.google.com/youtube/answer/6395969?co=GENIE.Platform%3DDesktop&hl=en |
| VeeR VR | „4-channel first order ambisonics“ | Global VR Content Community for Oculus, Windwos Mixed Reality, Vivi, Mi, Daydream. But sound for WebVR and Android is under currently development so it’s not listed in the other tables | https://veervr.zendesk.com/hc/en-us/articles/360004268513-Support-for-spatial-audio-ambisonic |
Desktop Computer, Oculus Rift or HTC Vive
| Platform | Format | Description | Source |
|---|---|---|---|
| GoProVR | 2nd and 3rd order ambisonics; no tbe yet | former named Kolor Eyes Player | http://www.kolor.com/gopro-vr-player/download/ ; https://github.com/google/spatial-media/blob/master/docs/spatial-audio-rfc.md |
| HTC Vive Cinema | Ambisonics Ambix (1st, 2nd or 3rd order); ITU 5.1, 7.1; TBE | Supports a great variety: FOA, TBE, 2nd HOA, or 3rd HOA with 4, 9 or 16 channels each. Also standard loudspeaker ITU 5.1, 7.1 and Two Big Ears format by metadata | https://www.viveport.com/apps/ed3adb70-9390-4ca3-863a-26b5fd08b8d7 |
| FB360 Videoplayer | Two Big Ears | Not only works as a slave with a DAW, but as standalone on a Desktop as well as Oculus Rift and Vive. Just import your video and .tbe-file | https://facebookincubator.github.io/facebook-360-spatial-workstation/Documentation/SpatialWorkstation/SpatialWorkstation.html#video-player |
| Oculus Video Player | Two Big Ears | Encode your video with the tbe wav-file just like for GearVR. Experimental MKV-Opus with lossless compression | https://facebookincubator.github.io/facebook-360-spatial-workstation/KB/OculusVideoOnRift.html |
| OZO Preview | Ambix | supports the native format of Nokia Ozo camera, which is a for channel ambisonics B-Format | https://ozo.nokia.com/ozo_en/blog/OZO-update-1_5_0/ |
| VLC Media Player | Higher Order Ambisonics, 5.1, 7.1 | Ambisonics audio renderer, supporting up to 3rd Order; Binauralizer working with Ambisonics or 5.1/7.1 streams | https://www.videolan.org/vlc/releases/3.0.0.html |
| AudioEase WebVR | Ambix | just add the video and sound you would need for YouTube without the need to uploading anything | https://www.audioease.com/360/webvr/ |
| Labs 8Plan | Ambix, FuMa | similar to AudioEase, but for sound only on Chrome Browser | http://labs.plan8.se/ambisonics-webplayer/ |
| Harpex-B Player | Ambix | free to download, an Ambisonic B-Format Decoder to play around with your audio on Headphones or surround loudspeaker | http://harpex.net/download.html |