Montreux in 360-Grad-3D-Video

15.07.2016

audioborn und PRG Lab realisieren Virtual-Reality-Aufnahmen für das Montreux Jazz Archiv.


 

Morgen, am Samstag, den 16. Juli 2016, geht das Montreux Jazz Festival mit einem ausverkauften Konzert von Deep Purple zu Ende. In den letzten 50 Jahren standen hier die Größen der Musikgeschichte auf der Bühne: von Nina Simone und Ray Charles über Miles Davis, Prince und David Bowie.

Für das diesjährige Festival hat audioborn ein Projekt entwickelt, mit dem die Konzerte zum ersten Mal in 360° / 3D-Video und Sound aufgenommen werden. Diese Aufnahmen werden im Anschluss an das Festival für die Verwendung von Virtual-Reality-Applikationen aufbereitet und geben dem Betrachter so das Gefühl, live bei den Konzerten dabei zu sein.

 

Für audioborn und PRG Lab ist kein Aufwand zu groß, um in Montreux perfekte Aufnahmen zu realisieren.
Für audioborn und PRG Lab ist kein Aufwand zu groß, um in Montreux perfekte Aufnahmen zu realisieren.

 

Beauftragt durch das Metamedia Center der Universität École Polytechnique Fédérale de Lausanne (EPFL) und das Montreux Jazz Festival, übernimmt audioborn als offizieller Technologiepartner die Projektleitung und kooperiert mit PRG Lab. audioborn ist für die Aufnahmen und Reproduktion aller Konzerte in 3D-Audio zuständig und nutzt dafür den eigenen 3D-Audio-Echtzeit-Prozessor Auratorium. Die Software wurde für die präzise Simulation von 3D-Audio in Virtual-Reality-Applikationen entwickelt und nutzt Ray-Tracing-Verfahren, um physikalisch korrekten und damit natürlichen Sound zu reproduzieren.

 

PRG Lab, eine Unit der Production Resource Group mit Sitz in Düsseldorf, entwickelt kundenspezifische, interaktive und zukunftsweisende Software-Lösungen für das Veranstaltungs- und Messesegment. Für die Videoaufnahmen der 360-Grad-spherischen Konzertaufnahmen nutzt PRG Lab ein 360-Grad-3D-Nokia-OZO-Kamerasystem.

 

Die Kooperation zwischen audioborn und PRG Lab beim Montreux Jazz Festival ist einer der ersten kommerziellen Einsätze des OZO-Systems bei einer Produktion in diesem Größenumfang. Zusätzlich zu den regulären Multitrack Recordings wird audioborn 3D-Aufnahmen mit einem Sennheiser VR-Mikrofon-Prototypen erstellen, um dadurch eine überzeugend realistische 3D-Audio-Wiedergabe der Aufnahmen zu ermöglichen.

 

"Die verwendeten Methoden zur Aufzeichnung des Sounds – welcher der wohl wichtigste Teil des Montreux Jazz Festivals ist – werden Pionierarbeit leisten, sowohl für die Erstellung von 3D-Audio-Aufnahmen als auch deren natürliche Wiedergabe. Mit unserem 3D-Audio-Prozessor Auratorium wird der bisher höchste Immersionsgrad für die Wiedergabe des Jazz Archivs erreicht", sagt Dr. Dirk Schröder, CEO von audioborn.

"Wir müssen bestimmen, welchen Einfluss die Position der Kamera im Raum auf jedes einzelne Instrument und jeden Ton hat. Wenn Ton und Video für die VR-Wiedergabe zusammenkommen, soll das Gefühl erzeugt werden, tatsächlich beim Festival anwesend zu sein. Unser Ziel ist es, ein völlig immersives Erlebnis zu schaffen, das sowohl auf visueller als auch auf auditiver Ebene funktioniert. Wir sind stolz darauf, zusammen mit PRG als unserem professionellen Partner für die 3D Video-Aufnahmen zu arbeiten."

 

"Eine der Herausforderungen bei diesem Projekt ist die große Datenmenge, die wir in den 16 Tagen Aufnahmezeit mit dem OZO-System generieren", sagt Michael Ochs, Audio Engineer bei PRG Lab.

"Spannend ist auch die Bandbreite neuester Technologien, die hier zum Einsatz kommen. Zudem ist es eines der ersten Projekte dieser Art, und viele der Abläufe und Prozesse müssen erst entwickelt werden."

 

Das große Datenvolumen bei 3D-Aufnahmen stellt eine Herausforderung in der Erstellung immersiver Inhalte dar. Eine Aufnahme von drei Stunden generiert ein Datenvolumen von etwa 2 TB. Nach der Dekomprimierung des aufgenommenen Rohmaterials vervielfacht sich das Datenvolumen um den Faktor 12.

PRG Lab baut seine 3D-Kompetenzen kontinuierlich aus und wird sowohl die OZO Production-Computer als auch die audioborn-Software Auratorium zur Erstellung immersiver Inhalte nutzen. Die Audiomischungen können über mehrkanalige 3D-Audio-Systeme oder binaurale Kopfhörer wiedergegeben werden.

 

Montreux Jazz Digital Project

2007 vereinen die Eidgenössische Technische Hochschule Lausanne und die Fondation Claude Nobs ihre Kräfte und Kompetenzen, um sich mit der Digitalisierung dieser audiovisuellen Aufnahmen mit hoher Auflösung einem einzigartigen, umfangreichen Projekt zu widmen. Dieses ist dazu bestimmt, die Erhaltung der Archive zu gewährleisten und sie für die kommenden Generationen aufzuwerten.

Ziel ist es zudem, die Archive unter Beachtung der Copyright-Bestimmungen einem immer größeren Publikum zugänglich zu machen. Dies ist möglich dank der Entwicklung interaktiver Übertragungstechnologien, mit denen auch Ziele auf erzieherischer, wissenschaftlicher und kultureller Ebene verfolgt werden.

http://metamedia.epfl.ch/montreux_jazz_digital_project/home


www.audioborn.com