案例研究 - 为 HoloTour 创建意想不到的视角

我们希望你在 HoloTour for Microsoft HoloLens 中获得难忘的体验。 除了传统的旅游景点,我们还规划了一些“意想不到的视角”- 在任何旅行中都无法体验的时刻,但通过 HoloLens 中的技术,我们可以将它们直接带到客厅。 为这些体验创建内容需要一些不同于标准捕获过程的技术。

内容挑战

HoloTour 体验中的某些场景(例如角斗士乘坐热气球飞越现代罗马和古罗马斗兽场)提供在其他任何地方都看不到的独特景观。 这些时刻让你感到兴奋和惊奇,使 HoloTour 之旅不仅仅是一场教育体验。 我们期待你记住这种时刻并兴奋地告诉别人。 由于我们无法将相机装备带上天空,并且还没有掌握时间旅行,因此这些“意想不到的视角”中的每一个都需要通过特殊的方法来创建内容。

幕后

创造这些独特时刻和视角不仅需要摄影和剪辑技术, 而且需要花费大量的时间,安排许多拥有不同技能的人员,还有一点点好莱坞魔法。

从热气球上看罗马

从我们早期的规划阶段开始,我们就知道要在 HoloTour 中制作鸟瞰图。 从空中俯瞰罗马可以获得大多数人都从未见过的视角,并领略热门地标在空间上的定位方式。 尝试用现有的相机和麦克风装备自己捕捉这种景观会很困难,但幸运的是我们不必要这样做。

首先,必须指出,在 HoloTour 中前往的所有位置都融入了运动。 我们的目标是让你“身临其境”。由于你在现实生活中所到之处都能看到运动,因此我们的虚拟目的地也需要传达环境运动。 例如,在旅途中参观万神殿时,你会看到人们在广场上闲逛,或者在台阶上聚在一起。 背景运动有助于让你感觉自己真的身临其境,而不是站在舞台上的静态环境中。

为了创建热气球鸟瞰图,我们已与 Microsoft 的其他团队合作,以获得罗马的航拍全景图像。 这些图像的画质绝佳,景色令人惊叹,但是当我们在场景中未经修改地使用这些图像时,与其他游览部分相比,它们看上去毫无生气,而且缺少运动感也让人无法集中注意力。

The hot air balloon basket, floating over Rome.
漂浮在罗马上空的热气球吊篮

为了确保航拍地点符合其他目的地的相同质量标准,我们决定将静态照片转换为生动的运动场景。 第一步是编辑图像并将运动融入其中。 我们聘请了一位视觉效果艺术家来帮助解决这个问题。 编辑是为了展示云朵缓慢飘移、鸟儿飞过、偶尔有飞机或直升机穿过天际线的情景。 在地面上,制作了许多在街道上行驶的汽车。 在 HoloTour 的罗马之旅中,你可能不能明确地感受到这种运动。 这真的很棒! 微妙的运动并不是为了吸引你的眼球,但如果没有这些小心机,人们会立即注意到它不过是场景中一张静态图像。

第二件事是为你提供一个欣赏场景的有利位置。 如果只是让你漂浮在半空中,则你就不会有身临其境的感觉,因此我们创建了一个气球的 3D 模型并将你置身其中。 这样,你便可以在气球中四处走动,从边缘向下看以获得更好的视角。 我们发现这是体验航拍图像的自然而有趣方式。

热气球体验给我们的音频团队带来了独特的挑战,因为后勤工作的限制,我们无法将麦克风悬停在罗马上空数千英尺的位置。 幸运的是,我们从整个城市捕获了大量可以在后期制作中使用的环境音频。 我们将音频发射器定位在从地面捕获音频的相对位置。 然后将音频过滤为听似非常遥远,如同从热气球乘坐者的角度听到的一样,为场景提供真实的定向音景。

时空穿越到古罗马

即使在建成两千多年后,罗马各地的纪念碑和建筑遗迹仍令人印象深刻,但我们知道,我们有一个独特的机会向你展示回到过去观看这些古罗马建筑时的感觉。

当然,我们找不到任何有关罗马斗兽场建成时的视频片段或静态图像,因此我们需要自行创建。 我们必须展开大量的研究以尽可能多地了解建筑;了解它的施工材料,查看建筑设计图,并阅读历史描述以获得足够的信息来制作虚拟娱乐应用。

The modern day ruins of the Colosseum with an overlay showing the arena floor as it would have looked in ancient Rome.
罗马斗兽场的当今废墟,图中有一个叠加层,显示古罗马时期的竞技场地面

我们想做的第一件事是通过富有教育意义的叠加层来改进传统游览体验。 在 HoloTour 中,当你参观今天的罗马斗兽场遗址时,竞技场地面将会变换,展示它在使用过程中的样子,包括精心设计的地下集结区。 在普通的游览中,可能有人会描述这些信息,你也可以试着想象。但在 HoloTour 中,可以实际观看这些景象。

对于这种叠加层,我们让艺术家匹配我们捕获镜头的视点并手工创建叠加图像。 视角需要匹配,这样,在我们将视频替换为我们的图像时,两者会正确对齐。

将角斗场面搬上舞台

虽然叠加层是一种引人入胜的历史讲述方式,但我们最兴奋的是让你能够回到过去。 叠加层只是来自特定视点的静止图像,但时间旅行需要对整个罗马斗兽场进行建模,并且如上所述,我们需要在场景中添加运动,使其变得生动。 实现这一目标需要付出相当大的努力。

这项任务非常艰巨,我们的团队无法单独完成,因此我们的艺术团队与一家外部特效公司 Whiskytree 展开了合作,该公司的典型业务就是为好莱坞电影提供视觉特效。 Whiskytree 帮助我们重建了罗马鼎盛时期的斗兽场,使我们能够站在竞技场地面上讲解建筑,并创建从国王包厢观看角斗的画面。 欢呼的人群和挥舞的旗帜增加了必要的微妙动作,使人们感觉这些真实场景,而不仅仅是图像。

The recreated Colosseum as seen from the arena floor. When viewed in HoloTour, the banners flutter in the breeze, giving a feeling of motion.
从竞技场地面上观看重建的斗兽场。 在 HoloTour 中可以看到旗帜在微风中飘扬,产生一种运动感。

角斗是罗马之旅的重头戏。 Whiskytree 以视频形式为我们呈现了竞技场和 3D 模拟人群,但我们需要在竞技场地面上添加角斗士。 此流程环节看起来更像是好莱坞视频制作,而不是孵化游戏工作室的项目。 我们的团队成员绘制了一套粗略的战斗动作,然后在动作指导的配合下对其做了完善。 我们招募了演员来上演模拟战斗,并购买了盔甲,让他们有模有样。 最后,我们以绿色屏幕为背景拍摄了整个场景。

Our gladiators, getting instructions between takes.
我们的角斗士,在拍摄间隙时间接受指导

此场景将你置身于国王的包厢中,这意味着,所有的镜头都需要从这个角度来拍摄。 如果从角斗士在竞技场上战斗的位置拍摄,则无法在后期正确合成战斗动作,因此我们将摄影师安置在一架非常高的剪式升降机上,以俯视的角度拍摄战斗画面。

Getting the right perspective: filming from a scissor lift.
获得正确的视角:通过剪式升降机拍摄

在后期制作中,角斗士被合成到竞技场地面上,视角也正确,但仍然遇到了一个问题:在合成过程中删除了角斗士在绿色屏幕上的影子。 因为没有影子,角斗士如同漂浮在空中。 幸运的是,Whiskytree 非常擅长解决这种问题,他们使用一些技法将影子重新添加到了场景中。 结果就是你在今天在游览中看到的画面。

关于作者

David Haley David Haley 是一名高级开发人员,他从 HoloTour 的工作中学到了超乎想象的关于相机装备和视频播放的知识 Jason Syltebo Jason Syltebo 是一名音频设计师,他确保你可以体验到你所参观的每个目的地的音景,甚至历史音景
Danny Askew Danny Askew 是一名视频艺术家,他确保你的罗马之旅尽可能完美无瑕

请参阅