Étude de cas - Création de perspectives impossibles pour HoloTour

Nous voulions que vos expériences dans HoloTour pour Microsoft HoloLens être inoubliables. En plus des arrêts touristiques traditionnels, nous avons planifié quelques « perspectives impossibles » – moments qui seraient impossibles à vivre sur n’importe quel tour mais qui, via la technologie dans HoloLens, nous pourrions apporter directement à votre salon. La création du contenu pour ces expériences nécessite certaines techniques différentes de notre processus de capture standard.

Le défi de contenu

Il y a certaines scènes de l’expérience HoloTour, comme la promenade en ballon à air chaud sur rome moderne et la lutte gladiatoriale au Colisée dans l’ancienne Rome, qui fournissent des vues uniques que vous ne verrez nulle part ailleurs. Ces moments sont destinés à vous exciter et à vous étonner, en faisant votre voyage à travers HoloTour plus qu’une expérience éducative. Ce sont les moments où nous voulons que vous vous souveniez et soyez excité de dire à d’autres personnes. Étant donné que nous n’avons pas pu prendre notre appareil photo dans le ciel et que nous n’avons pas (encore) maîtrisé le voyage temporel, chacune de ces « perspectives impossibles » a appelé à une approche spéciale de la création de contenu.

Dans les coulisses

La création de ces moments et perspectives uniques exigeait plus que le simple tournage et l’édition. Il a fallu beaucoup de temps, les gens avec beaucoup de compétences différentes, et un peu de magie hollywoodienne.

Affichage de Rome à partir d’un ballon à air chaud

Dès nos premiers jours de planification, nous savions que nous voulions faire des vues aériennes dans HoloTour. La vue de Rome du ciel vous donne une perspective que la plupart des gens n’arrivent jamais à voir et un sens de la façon dont les monuments populaires sont situés spatialement. Essayer de capturer cela nous-mêmes avec notre caméra existante et notre plate-forme de microphone aurait été extrêmement difficile, mais heureusement nous n’avons pas dû.

Tout d’abord, il est important d’expliquer que tous les emplacements que vous visitez dans HoloTour ont un mouvement dans eux. Notre objectif était de vous faire « sentir comme vous êtes vraiment là » et puisque vous êtes entouré par le mouvement partout où vous allez dans la vie réelle, nos destinations virtuelles nécessaires pour transmettre le mouvement ambiant aussi. Par exemple, lorsque vous visitez le Pantheon lors de votre voyage, vous verrez des gens errant tout au long de la place et congrégant sur les marches. Le mouvement d’arrière-plan vous permet de vous sentir comme vous êtes vraiment debout dans l’emplacement, plutôt que dans un environnement intermédiaire et statique.

Pour créer les vues aériennes pour la course à ballon, nous avons travaillé avec d’autres équipes chez Microsoft pour accéder à l’imagerie panoramique aérienne de Rome. La qualité de ces images était excellente et la vue était magnifique, mais quand nous les avons utilisées dans les scènes sans modification, ils se sentaient sans vie par rapport aux autres parties de la tournée et le manque de mouvement était distrait.

The hot air balloon basket, floating over Rome.
Le panier à ballon à air chaud, flottant sur Rome

Pour garantir que les lieux aériens ont atteint le même bar de qualité que d’autres destinations, nous avons décidé de transformer les photographies statiques en scènes vivantes et mobiles. La première étape était de modifier l’image et le mouvement composite dans celui-ci. Nous avons contracté un artiste d’effets visuels pour nous aider avec cela. L’édition a été faite pour montrer les nuages lentement dérivant, les oiseaux volant, et un avion ou un hélicoptère occasionnel parcourant la ligne d’horizon. Au sol, un certain nombre de voitures ont été faites pour conduire les rues. Si vous avez fait la tournée de Rome à HoloTour, il est peu probable que vous ayez été explicitement au courant de tout ce mouvement. C’est vraiment génial ! Le mouvement subtil n’est pas destiné à attirer vos yeux, mais sans ces petites touches, les gens ont remarqué immédiatement qu’il s’agissait d’une image statique dans la scène.

La deuxième chose que nous avons fait était de vous donner un point de vue à partir duquel voir la scène. Vous ne vous sentirez pas comme si vous êtes vraiment là si vous ressemblez simplement à flotter dans l’escalier, donc nous avons créé un modèle 3D d’un ballon et vous a placé à l’intérieur. Cela vous permet de vous promener autour du ballon et de regarder sur le bord pour obtenir un meilleur point de vue. Nous avons trouvé qu’il s’agit d’un moyen naturel et amusant d’expérimenter l’imagerie aérienne.

L’expérience des ballons à air chaud a présenté des défis uniques pour notre équipe audio, car la logistique nous a empêchés d’avoir des microphones pointant des milliers de pieds sur Rome. Heureusement, nous avons eu une grande quantité de capture audio ambiante de toute la ville que nous avons pu utiliser pendant la post-production. Nous avons placé des émetteurs audio à leurs emplacements relatifs à partir de l’endroit où ils ont été capturés à partir du sol. L’audio a ensuite été filtré pour son distant, comme si vous l’entendiez du point de vue de quelqu’un qui montait dans le ballon à air chaud, fournissant un paysage sonore authentique et directionnel pour la scène.

Voyage à Rome antique

Les vestiges des monuments et des bâtiments à travers Rome sont impressionnants même deux mille ans après leur construction, mais nous savions que nous avions une occasion unique de vous montrer ce qu’il serait de revenir en temps et de voir ces structures comme elles apparaissent dans l’ancienne Rome.

Naturellement, il n’y a pas de séquences vidéo ou d’images statiques) du Colisée tel qu’il semblait quand il a été construit, donc nous avions besoin de créer notre propre. Nous avons dû faire beaucoup de recherches pour en apprendre autant sur la structure que possible; comprendre les documents qu’il a été créés, examiner des diagrammes architecturaux et lire des descriptions historiques pour obtenir suffisamment d’informations pour pouvoir créer une récréation virtuelle.

The modern day ruins of the Colosseum with an overlay showing the arena floor as it would have looked in ancient Rome.
Les ruines modernes du Colisée avec une superposition montrant le sol de l’arène comme il aurait regardé dans l’ancienne Rome

La première chose que nous voulions faire était d’améliorer les visites traditionnelles avec des superpositions éducatives. Dans HoloTour lorsque vous visitez les ruines du Colisée tel qu’il se trouve aujourd’hui, l’étage de l’arène est transformé pour vous montrer comment il aurait regardé pendant l’utilisation, y compris les zones intermédiaires souterraines élaborés. Dans une visite guidée normale, vous pouvez avoir ces informations décrites pour vous et vous pourriez essayer de l’imaginer, mais dans HoloTour, vous pouvez réellement le voir.

Pour une superposition comme celle-ci, nous avons eu que nos artistes correspondent au point de vue de nos images de capture et créent l’image de superposition à la main. La perspective doit correspondre afin que lorsque nous remplaçons la vidéo par notre image, les deux s’alignent correctement.

Mise en scène du combat de gladiateur

Tandis que les superpositions sont un moyen attrayant d’enseigner aux gens sur l’histoire, ce que nous étions les plus excités à propos de vous transporter dans le temps. La superposition n’était qu’une image encore d’un point de vue particulier, mais le temps de voyage nécessiterait que l’ensemble du Colisée soit modélisé, et, comme indiqué ci-dessus, nous avions besoin d’avoir des mouvements dans la scène pour le rendre vivant. La réalisation de ce travail a pris beaucoup d’efforts.

Cette entreprise était trop grande pour que notre équipe fasse seul, donc notre équipe d’art a travaillé avec Whiskytree, une société d’effets externes qui travaille généralement sur des effets visuels pour les films hollywoodiens. Whiskytree nous a aidés à recréer le Colisée dans son heyday, nous permettant de vous enseigner la structure tout en étant debout sur le sol de l’arène et de créer une vue d’un combat de gladiateur à partir de la boîte de l’empereur. Les foules encourageantes et les bannières ondulées ajoutent le mouvement subtil nécessaire pour qu’il se sente comme ces lieux réels et pas seulement des images.

The recreated Colosseum as seen from the arena floor. When viewed in HoloTour, the banners flutter in the breeze, giving a feeling of motion.
Le Colisée recréé comme vu du sol de l’arène. Lorsqu’elle est vue dans HoloTour, les bannières flottent dans la brise, donnant un sentiment de mouvement.

La tournée de Rome aboutit à la lutte de gladiateur. Whiskytree nous a fourni avec l’arène et les simulations de foule 3D rendues en vidéo, mais nous avions besoin d’ajouter dans les gladiateurs sur le sol de l’arène. Cette partie de notre processus ressemblait plus à une production vidéo hollywoodienne qu’à un projet d’un studio de jeu d’incubation. Les membres de notre équipe ont mis en place une séquence de combat approximative, puis l’ont affinée avec un chorégraphe. Nous avons engagé des acteurs pour mettre en scène notre bataille fictive et acheter des armures afin qu’ils regardent la partie. Enfin, nous avons filmé toute la scène sur un écran vert.

Our gladiators, getting instructions between takes.
Nos gladiateurs, obtenir des instructions entre les

Cette scène vous place dans la boîte de l’Empereur, ce qui signifiait que toutes les images devaient être de cette perspective. Si nous avons filmé d’où les gladiateurs se battaient sur le sol de l’arène, nous n’aurions pas été en mesure de composer correctement la séquence de combat plus tard, donc nous avons mis notre opérateur de caméra dans un ascenseur très grand ciseaux, regardant vers le bas sur la séquence de combat pour le tournage.

Getting the right perspective: filming from a scissor lift.
Obtenir la bonne perspective: filmer à partir d’un lift-ciseaux

En post-production, les gladiateurs ont été composites sur le sol de l’arène et la perspective était correcte, mais un problème est resté : les ombres des gladiateurs sur l’écran vert ont été supprimées dans le cadre du processus de composition. Sans ombres, il semblait que les gladiateurs flottent dans l’air. Heureusement, Whiskytree est excellent pour résoudre ce genre de problème et ils ont utilisé un peu de sorcier technique pour ajouter des ombres dans notre scène. Le résultat est ce que vous voyez dans la tournée aujourd’hui.

À propos des auteurs

David Haley David Haley est un développeur senior qui a appris plus sur les plateformes de caméra et la lecture vidéo que ce qu’il pensait possible de travailler sur HoloTour. Jason Syltebo Jason Syltebo est un concepteur audio qui s’est assuré que vous pouviez vivre le paysage sonore de chaque destination que vous visitez, même lorsque vous revenez dans le temps.
Danny Askew Danny Askew est un artiste vidéo qui s’est assuré que votre voyage à Rome était aussi impeccable que possible.

Voir aussi