Fallstudie – Erstellen unmöglicher Perspektiven für HoloTour

Wir wollten Ihre Erfahrungen in HoloTour für Microsoft HoloLens unvergesslicher sein. Zusätzlich zu den traditionellen Touristenstopps planen wir einige "unmögliche Perspektiven" – Momente, die nicht auf jeder Tour erleben könnten, aber über die Technologie in HoloLens könnten wir direkt in Ihr Wohnzimmer bringen. Das Erstellen von Inhalten für diese Erfahrungen erforderte einige verschiedene Techniken als unser Standardaufnahmeprozess.

Die Inhalts-Herausforderung

Es gibt bestimmte Szenen in der HoloTour-Erfahrung , wie z. B. die Heißluftballonfahrt über moderne Rom und den Gladiatorialkampf am Colosseum in alten Rom , die einzigartige Ansichten bieten, die sie sonst nicht sehen. Diese Momente sollen Sie begeistern und beazen, indem Sie Ihre Reise durch HoloTour mehr als nur ein Bildungserlebnis machen. Sie sind die Momente, an denen Sie sich erinnern möchten, und freuen Sie sich, andere Menschen darüber zu informieren. Da wir unsere Kamera-Rig nicht in den Himmel nehmen konnten und wir noch keine (noch) masterierte Zeitreise haben, fordert jede dieser "unmöglichen Perspektiven" einen speziellen Ansatz zum Erstellen von Inhalten.

Abläufe im Hintergrund

Das Erstellen dieser einzigartigen Momente und Perspektiven erfordert mehr als nur Film und Bearbeitung. Es dauerte eine enorme Zeit, Menschen mit vielen verschiedenen Fähigkeiten und ein wenig Hollywood-Magie.

Sehen von Rom aus einem Heißluftblasen

Aus unseren frühen Planungstagen wussten wir, dass wir Luftansichten in HoloTour durchführen wollten. Das Sehen von Rom aus dem Himmel bietet Ihnen eine Perspektive, die die meisten Menschen nie sehen und ein Gefühl dafür haben, wie beliebte Sehenswürdigkeiten raumlich liegen. Versuchen Sie, dies selbst mit unserer vorhandenen Kamera und Mikrofon-Rig zu erfassen, wäre enorm schwierig gewesen, aber glücklicherweise mussten wir nicht.

Zunächst ist es wichtig zu erklären, dass alle Orte, die Sie in HoloTour besuchen, Bewegung haben. Unser Ziel war es, Sie "wirklich dort zu fühlen" und da Sie von Bewegung überall umgeben sind, wo Sie in reales Leben gehen, unsere virtuellen Ziele, die für die Vermittlung von Umgebungsbewegung erforderlich sind. Wenn Sie z. B. das Pantheon auf Ihrer Reise besuchen, sehen Sie, dass Die Menschen auf der Ganzen Platz wandern und auf den Schritten zusammenkommen. Die Hintergrundbewegung hilft Ihnen, sich so zu fühlen, dass Sie wirklich an der Position stehen, anstatt in einer phasenhaften, statischen Umgebung.

Um die Luftansichten für die Sprechblasenfahrt zu erstellen, arbeiteten wir mit anderen Teams bei Microsoft zusammen, um Zugang zu Luftbildbild von Rom zu erhalten. Die Qualität dieser Bilder war ausgezeichnet und die Aussicht war atemberaubend, aber wenn wir sie in den Szenen ohne Änderung verwendet haben, fühlten sie sich im Vergleich zu den anderen Teilen der Tour lebenslos und der Mangel an Bewegung war ablenkend.

The hot air balloon basket, floating over Rome.
Der Heißluftballonkorb, der über Rom gleitend

Um sicherzustellen, dass die Luftstandorte die gleiche Qualitätsleiste wie andere Ziele erfüllt haben, haben wir beschlossen, die statischen Fotos in lebendige, bewegte Szenen zu transformieren. Der erste Schritt war es, das Bild und die zusammengesetzte Bewegung darin zu bearbeiten. Wir haben uns mit einem visuellen Effekt-Künstler verpflichtet, uns dabei zu helfen. Die Bearbeitung wurde durchgeführt, um langsam schleppende Wolken zu zeigen, Vögel zu fliegen, und ein gelegentliches Flugzeug oder Hubschrauber, das die Skyline durchläuft. Auf dem Boden wurden eine Reihe von Autos gemacht, um die Straßen zu fahren. Wenn Sie auf der Tour von Rom in HoloTour waren, ist es unwahrscheinlich, dass Sie explizit auf eine dieser Bewegungen hingewiesen wurden. Das ist tatsächlich großartig! Die subtile Bewegung soll ihr Auge nicht fangen, aber ohne diese kleinen Berührungen bemerkten Die Menschen sofort, dass es sich um ein statisches Bild in der Szene handelte.

Das zweite, was wir getan haben, gab Ihnen einen Vantagepunkt, aus dem die Szene angezeigt werden soll. Sie fühlen sich nicht so, als ob Sie wirklich dort sind, wenn sie aussehen, wenn Sie einfach in der Mitte schweben, so haben wir ein 3D-Modell eines Sprechblasens erstellt und Sie in es platziert. Dadurch können Sie um den Sprechblasen gehen und über den Rand schauen, um einen besseren Blick zu erhalten. Wir haben dies gefunden, um eine natürliche und spaßige Möglichkeit zu sein, die Luftbilderei zu erleben.

Die Erfahrung des Heißluftblasens stellt einzigartige Herausforderungen für unser Audioteam dar, da die Logistik verhinderte, dass wir Mikrofone haben, die Tausende von Fuß über Rom zeigen. Glücklicherweise hatten wir eine große Menge an Umgebungsaudioaufnahme aus der ganzen Stadt, die wir während der Postproduktion verwenden konnten. Wir platzierten Audio-Emitter an ihren relativen Standorten, an denen sie aus dem Boden aufgenommen wurden. Die Audioausgabe wurde dann nach entferntem Sound gefiltert, wie wenn Sie es aus der Perspektive einer Person hören, die in der Heißluftblase fährt, eine authentische, richtungsfreie Soundlandschaft für die Szene.

Zeit beim Reisen nach altem Rom

Die Reste von Denkmälern und Gebäuden in Rom sind sogar zwei tausend Jahre nach ihrer Konstruktion beeindruckend, aber wir wussten, dass wir ihnen eine einzigartige Gelegenheit hatten, Ihnen zu zeigen, was es in der Zeit sein würde, und sehen Sie diese Strukturen, wie sie in alten Rom erschienen.

Natürlich gibt es kein Videomaterial oder statische Bilder) des Colosseums, wie es beim Aufbau angezeigt wurde, so dass wir unsere eigenen erstellen mussten. Wir mussten viel Forschung tun, um so viel über die Struktur zu lernen, wie wir könnten; Das Verständnis der Materialien, aus dem es gemacht wurde, die Architekturdiagramme zu überprüfen und historische Beschreibungen zu lesen, um genügend Informationen zu erhalten, um eine virtuelle Erholung zu machen.

The modern day ruins of the Colosseum with an overlay showing the arena floor as it would have looked in ancient Rome.
Die modernen Ruinen des Colosseums mit einer Überlagerung, die den Arenaboden zeigt, wie es in antiken Rom aussehen würde

Das erste, was wir tun wollten, war eine Verbesserung der traditionellen Touren mit Bildungsüberlagerungen. In HoloTour, wenn Sie die Ruinen des Colosseums besuchen, wie es heute steht, wird der Arenaboden transformiert, um Ihnen zu zeigen, wie sie während der Nutzung aussehen würde, einschließlich der aufwendigen unterirdischen Inszenierungsflächen. Auf einer normalen Tour haben Sie möglicherweise diese Informationen beschrieben, und Sie könnten versuchen, es vorzustellen, aber in HoloTour können Sie es tatsächlich sehen.

Für eine Überlagerung wie dies hatten wir unsere Künstler mit dem Blick auf unser Aufnahmematerial übereinstimmen und das Überlagerungsbild von Hand erstellen. Die Perspektive muss übereinstimmen, damit wir das Video durch unser Bild ersetzen, beide ordnungsgemäß ausrichten.

Inszenieren des Gladiatorkampfes

Während Überlagerungen eine ansprechende Möglichkeit sind, Menschen über Geschichte zu unterrichten, was wir uns am meisten freuen, war es, Sie wieder in die Zeit zu bringen. Die Überlagerung war nur ein Bild aus einem bestimmten Blick, aber die Zeitreise erforderte, dass das gesamte Colosseum modelliert werden muss, und wie oben beschrieben, mussten wir Bewegung in der Szene haben, um es lebendig zu machen. Dies hat einen erheblichen Aufwand gedauert.

Dieses Unternehmen war für unser Team zu groß, allein zu tun, daher arbeitete unser Kunstteam mit Whiskytree, einem externen Effektunternehmen, das normalerweise an visuellen Effekten für Hollywood-Filme arbeitet. Whiskytree half uns, das Colosseum in seinem Heyday neu zu erstellen, damit wir Ihnen die Struktur während des Standes auf dem Arenaboden vermitteln und einen Blick auf einen Gladiatorkampf aus dem Kaiserfeld schaffen können. Die jubelnden Massen und Wellenbanner fügen die subtile Bewegung hinzu, die notwendig ist, um es so zu fühlen, als seien sie echte Orte und nicht nur Bilder.

The recreated Colosseum as seen from the arena floor. When viewed in HoloTour, the banners flutter in the breeze, giving a feeling of motion.
Das neu erstellte Colosseum, wie aus dem Arenaboden gesehen. Wenn sie in HoloTour angezeigt wird, strahlt das Banner im Wind, was ein Gefühl von Bewegung gibt.

Die Tour von Rom gipfelt mit dem Gladiator-Kampf. Whiskytree lieferte uns die Arena und 3D-Crowd-Simulationen, die als Video gerendert wurden, aber wir mussten die Gladiatoren auf dem Arenaboden hinzufügen. Dieser Teil unseres Prozesses sieht eher wie eine Hollywood-Videoproduktion aus als ein Projekt aus einem Inkubation Game Studio. Mitglieder unseres Teams haben eine grobe Kampfsequenz zugeordnet und dann mit einem Choreographen verfeinert. Wir haben Schauspieler eingestellt, um unseren simulierten Kampf zu spielen und Rüstungen zu erwerben, damit sie den Teil aussehen würden. Schließlich haben wir die ganze Szene gegen einen Grünen Bildschirm gefilmt.

Our gladiators, getting instructions between takes.
Unsere Gladiatiors, die Anweisungen zwischen Denkangaben

Diese Szene stellt Sie in das Feld des Kaisers, was bedeutete, dass alle Aufnahmen aus dieser Perspektive stammen müssen. Wenn wir gefilmt haben, wo die Gladiatoren auf dem Arenaboden kämpfen, hätten wir die Kampfsequenz später nicht richtig zusammengesetzt, so dass wir unsere Kameraoperatoren in einem sehr hohen Scherenaufzug auf dem Kampfsequenz nach unten setzen würden.

Getting the right perspective: filming from a scissor lift.
Die richtige Perspektive: Filmen von einem Scherenlift

Nach der Produktion wurden die Gladiatoren auf dem Arenaboden zusammengesetzt und die Perspektive war richtig, aber ein Problem blieb: die Schatten der Gladiatoren auf dem Grünen Bildschirm wurden als Teil des Compositing-Prozesses entfernt. Ohne Schatten sah es aus wie die Gladiatoren in der Luft schweben. Glücklicherweise ist Whiskytree großartig bei der Lösung dieses Problems und sie haben ein bisschen technische Assistenten verwendet, um Schatten zurück in unsere Szene hinzuzufügen. Das Ergebnis ist das, was Sie heute in der Tour sehen.

Über die Autoren

David Haley David Haley ist ein Senior Developer, der mehr über Kamera-Rigs und Videowiedergabe gelernt hat, als er dachte, dass er von der Arbeit an HoloTour möglich war. Jason Syltebo Jason Syltebo ist ein Audio-Designer, der sichergestellt hat, dass Sie die Soundlandschaft jedes Ziels erleben können, das Sie besuchen, auch wenn Sie wieder in die Zeit zurückkehren.
Danny Askew Danny Askew ist ein Videokünstler, der sichergestellt hat, dass Ihre Reise durch Rom so problemlos wie möglich war.

Siehe auch