Fallstudie: Erstellen unmöglicher Perspektiven für HoloTour

Wir wollten, dass Ihre Erfahrungen in HoloTour für Microsoft HoloLens unvergesslich werden. Zusätzlich zu den traditionellen touristischen Stopps haben wir einige "unmögliche Perspektiven" geplant – Momente, die auf keiner Tour zu erleben wären, die wir aber über die Technologie in HoloLens direkt in Ihr Wohnzimmer bringen könnten. Das Erstellen der Inhalte für diese Erfahrungen erforderte einige andere Techniken als unser Standarderfassungsprozess.

Die inhaltsbezogene Herausforderung

Es gibt bestimmte Szenen in der HoloTour-Erfahrung - wie die Heißluftballonfahrt über das moderne Rom und den Gladiatorenkampf am Kolosseum im alten Rom -, die einzigartige Ausblicke bieten, die Sie sonst nirgendwo sehen werden. Diese Momente sollen Sie begeistern und zum Staunen machen und Ihre Reise durch HoloTour mehr als nur ein pädagogisches Erlebnis machen. Es sind die Momente, an die sie sich erinnern und sich freuen, anderen Menschen davon zu erzählen. Da wir unser Kameragerät nicht in den Himmel tragen konnten und die Zeitreise (noch) nicht gemeistert haben, verlangte jede dieser "unmöglichen Perspektiven" einen speziellen Ansatz zum Erstellen von Inhalten.

Abläufe im Hintergrund

Diese einzigartigen Momente und Perspektiven zu schaffen, erforderte mehr als nur Das Filmen und Bearbeiten. Es hat eine enorme Menge an Zeit gedauert, Menschen mit vielen verschiedenen Fähigkeiten und ein wenig Hollywood-Magie.

Blick auf Rom von einem Heißluftballon aus

Schon in unseren frühen Planungstagen wussten wir, dass wir in HoloTour Luftaufnahmen machen wollten. Wenn Sie Rom vom Himmel aus sehen, erhalten Sie eine Perspektive, die die meisten Menschen nie sehen können, und ein Gefühl dafür, wie beliebte Sehenswürdigkeiten räumlich liegen. Dies selbst mit unserem vorhandenen Kamera- und Mikrofongerät aufzunehmen, wäre enorm schwierig gewesen, aber zum Glück mussten wir es nicht.

Zunächst ist es wichtig zu erklären, dass alle Standorte, die Sie in HoloTour besuchen, Bewegung haben. Unser Ziel war es, ihnen das Gefühl zu geben, dass Sie wirklich da sind, und da Sie überall, wo Sie im wirklichen Leben hingehen, von Bewegung umgeben sind, mussten unsere virtuellen Ziele auch Umgebungsbewegungen vermitteln. Für instance, wenn Sie das Pantheon auf Ihrer Reise besuchen, sehen Sie, wie Menschen durch den Platz wandern und sich auf den Stufen versammeln. Die Hintergrundbewegung trägt dazu bei, dass Sie das Gefühl haben, dass Sie wirklich an der Stelle stehen und nicht in einer inszenierten, statischen Umgebung.

Um die Luftansichten für die Ballonfahrt zu erstellen, haben wir mit anderen Teams bei Microsoft zusammengearbeitet, um Zugang zu Luftpanoramabildern von Rom zu erhalten. Die Qualität dieser Bilder war ausgezeichnet und die Aussicht war umwerfend, aber als wir sie in den Szenen ohne Änderungen verwendeten, fühlten sie sich im Vergleich zu den anderen Teilen der Tour leblos und der Mangel an Bewegung war ablenkend.

Der Heißluftballonkorb, der über Rom schwebt.
Der Heißluftballonkorb, der über Rom schwebt

Um sicherzustellen, dass die Luftstandorte den gleichen Qualitätsbalken wie andere Ziele erfüllen, haben wir uns entschieden, die statischen Fotos in lebendige, sich bewegende Szenen zu verwandeln. Der erste Schritt bestand darin, das Bild und die zusammengesetzte Bewegung darin zu bearbeiten. Wir haben einen Visual Effects-Künstler beauftragt, uns dabei zu helfen. Die Bearbeitung wurde durchgeführt, um zu zeigen, dass Wolken langsam driften, Vögel, die vorbeifliegen, und ein gelegentliches Flugzeug oder Hubschrauber, das die Skyline durchquerte. Auf dem Boden wurden eine Reihe von Autos hergestellt, um die Straßen zu fahren. Wenn Sie auf der Tour durch Rom in HoloTour waren, ist es unwahrscheinlich, dass Sie von einer dieser Bewegungen explizit wussten. Das ist wirklich großartig! Die subtile Bewegung soll nicht ins Auge fallen, aber ohne diese kleinen Berührungen bemerkten die Menschen sofort, dass es sich um ein statisches Bild in der Szene handelt.

Das zweite, was wir getan haben, war, Ihnen einen Aussichtspunkt zu geben, von dem aus Sie die Szene betrachten können. Sie werden sich nicht wirklich dort fühlen, wenn es aussieht, als würden Sie einfach in der Luft schweben, also haben wir ein 3D-Modell eines Ballons erstellt und Sie darin platziert. Dadurch können Sie um den Ballon herumlaufen und über den Rand schauen, um einen besseren Aussichtspunkt zu erhalten. Wir fanden dies als eine natürliche und lustige Möglichkeit, die Luftbilder zu erleben.

Das Heißluftballonerlebnis stellte unser Audioteam vor einzigartige Herausforderungen, da uns die Logistik verhinderte, dass Mikrofone tausende Meter über Rom schweben. Glücklicherweise hatten wir eine große Menge an Umgebungsaudioaufnahmen aus der ganzen Stadt, die wir während der Postproduktion verwenden konnten. Wir platzierten Audio-Emitter an ihren relativen Orten, von wo aus sie vom Boden erfasst wurden. Das Audio wurde dann gefiltert, um fern zu klingen, als würde man es aus der Perspektive eines im Heißluftballon fahrenden Menschen hören, was eine authentische, richtungsgetreue Klangkulisse für die Szene liefert.

Zeitreise ins antike Rom

Die Überreste von Denkmälern und Gebäuden in ganz Rom sind auch zweitausend Jahre nach ihrem Bau beeindruckend, aber wir wussten, dass wir eine einzigartige Gelegenheit hatten, Ihnen zu zeigen, wie es wäre, in die Zeit zurück zu gehen und diese Strukturen zu sehen, wie sie im alten Rom erschienen.

Natürlich gibt es kein Videomaterial oder statische Bilder) des Kolosseums, wie es zum Zeitpunkt seiner Erstellung erschien, also mussten wir unsere eigenen erstellen. Wir mussten viel recherchieren, um so viel über die Struktur zu lernen, wie wir konnten; die Materialien zu verstehen, aus dem sie hergestellt wurden, Architekturdiagramme zu überprüfen und historische Beschreibungen zu lesen, um genügend Informationen zu erhalten, um eine virtuelle Erholung zu machen.

Die modernen Ruinen des Kolosseums mit einer Überlagerung, die den Arenaboden zeigt, wie er im alten Rom ausgesehen hätte.
Die modernen Ruinen des Kolosseums mit einer Überlagerung, die den Arenaboden zeigt, wie er im alten Rom ausgesehen hätte

Das erste, was wir tun wollten, war, traditionelle Touren mit pädagogischen Überlagerungen zu verbessern. Wenn Sie in HoloTour die Ruinen des Kolosseums besuchen, wie es heute steht, wird der Arenaboden transformiert, um Ihnen zu zeigen, wie er während der Nutzung ausgesehen hätte, einschließlich der aufwendigen unterirdischen Stagingbereiche. Auf einer normalen Tour haben Sie diese Informationen möglicherweise beschrieben und Sie können es sich vorstellen, aber in HoloTour können Sie es tatsächlich sehen.

Für eine solche Überlagerung ließen wir unsere Künstler den Standpunkt unseres Aufnahmematerials anpassen und das Überlagerungsbild von Hand erstellen. Die Perspektive muss übereinstimmen, damit beim Ersetzen des Videos durch unser Bild beide richtig ausgerichtet werden.

Inszenierung des Gladiatorenkampfes

Während Überlagerungen eine ansprechende Möglichkeit sind, Menschen über Geschichte zu unterrichten, haben wir uns am meisten darüber gefreut, Sie zurück in die Zeit zu bringen. Die Überlagerung war nur ein Standbild von einem bestimmten Standpunkt aus, aber für Zeitreisen musste das gesamte Kolosseum modelliert werden, und wie oben erläutert, mussten wir Bewegung in der Szene haben, damit es sich lebendig anfühlt. Dies zu erreichen, war mit erheblichem Aufwand verbunden.

Dieses Unterfangen war zu groß, um unser Team alleine zu erledigen, sodass unser Kunstteam mit Whiskytree zusammengearbeitet hat, einem Unternehmen für externe Effekte, das in der Regel an visuellen Effekten für Hollywood-Filme arbeitet. Whiskytree half uns, das Kolosseum in seiner Blütezeit nachzubilden, so dass wir Ihnen die Struktur beibringen konnten, während wir auf dem Boden der Arena stehen, und einen Blick auf einen Gladiatorkampf aus der Box des Kaisers zu schaffen. Die jubelnden Massen und wehenden Banner fügen die subtile Bewegung hinzu, die notwendig ist, damit es sich anfühlt, als seien dies echte Orte und nicht nur Bilder.

Das nachgebildete Kolosseum vom Boden der Arena aus gesehen. In HoloTour flattern die Banner in der Brise und vermitteln ein Gefühl von Bewegung.
Das nachgebildete Kolosseum vom Boden der Arena aus gesehen. In HoloTour flattern die Banner in der Brise und vermitteln ein Gefühl von Bewegung.

Die Tour durch Rom endet mit dem Gladiatorkampf. Whiskytree stellte uns die Arena und 3D-Crowd-Simulationen zur Verfügung, die als Video gerendert wurden, aber wir mussten die Gladiatoren auf dem Arenaboden hinzufügen. Dieser Teil unseres Prozesses ähnelte eher einer Hollywood-Videoproduktion als einem Projekt aus einem Inkubation Game Studio. Mitglieder unseres Teams haben eine grobe Kampfsequenz ausgearbeitet und dann mit einem Choreografen verfeinert. Wir heuerten Schauspieler an, um unseren Scheinkampf zu inszenieren, und kauften Rüstungen, damit sie den Teil sahen. Schließlich haben wir die ganze Szene vor einem Greenscreen gefilmt.

Unsere Gladiatoren, erhalten Anweisungen zwischen den Takes.
Unsere Gladiatioren, erhalten Anweisungen zwischen den Takes

Diese Szene platziert Sie in der Box des Kaisers, was bedeutet, dass alle Aufnahmen aus dieser Perspektive sein mussten. Wenn wir gefilmt hätten, wo die Gladiatoren auf dem Arenaboden kämpften, hätten wir die Kampfsequenz später nicht richtig zusammengesetzt, sodass wir unseren Kamerabediener in einem sehr hohen Scherenlift hoch setzten und auf die Kampfsequenz zum Filmen schauten.

Die richtige Perspektive bekommen: Filmen aus einem Scherenlift.
Die richtige Perspektive bekommen: Drehaufnahmen von einem Scherenlift

In der Postproduktion wurden die Gladiatoren auf dem Boden der Arena zusammengesetzt und die Perspektive stimmte, aber ein Problem blieb: Die Schatten der Gladiatoren auf dem grünen Bildschirm wurden im Rahmen des Compositing-Prozesses entfernt. Ohne Schatten sah es so aus, als würden die Gladiatoren in der Luft schweben. Glücklicherweise ist Whiskytree großartig in der Lösung dieser Art von Problem und sie haben ein wenig technische Zauberei verwendet, um Schatten zurück in unsere Szene zu bringen. Das Ergebnis ist das, was Sie heute in der Tour sehen.

Über die Autoren

David Haley David Haley ist Senior Developer, der mehr über Kamerageräte und Videowiedergabe gelernt hat, als er es durch die Arbeit an HoloTour für möglich hielt. Jason Syltebo Jason Syltebo ist ein Audio-Designer, der dafür gesorgt hat, dass Sie die Klangwelt jedes Reiseziels, das Sie besuchen, erleben können, auch wenn Sie in die Zeit zurückkehren.
Danny Askew Danny Askew ist ein Videokünstler, der dafür gesorgt hat, dass Ihre Reise durch Rom so fehlerfrei wie möglich war.

Weitere Informationen