本文基于混合现实的性能建议,但侧重于特定于 Unity 的改进。
我们最近发布了一个名为“质量基础知识”的应用程序,其中介绍了 HoloLens 2 应用的常见性能、设计、环境问题和解决方案。 这个应用程序是后续内容的一个很好的视觉演示。
使用推荐的 Unity 项目设置
在 Unity 中优化混合现实应用的性能时,最重要的第一步是确保使用 Unity 的建议环境设置。 该文章包含一些用于构建高性能混合现实应用的最重要场景配置的内容。 以下部分重点介绍其中一些建议的设置。
如何使用 Unity 进行分析
Unity 提供了内置的 Unity Profiler,这是一个很好的资源,可以为您的特定应用程序收集有价值的性能见解。 虽然可以在编辑器中运行分析器,但这些指标并不代表真实的运行时环境,因此应谨慎使用结果。 在设备上运行时远程分析您的应用程序,以获得最准确和可操作的见解。
Unity 提供了出色的文档:
GPU 分析
Unity 探查器
连接 Unity 探查器并添加 GPU 探查器后, (查看右上角的“添加探查器”) ,可以在探查器中间看到分别在 CPU & GPU 上花费了多少时间。 这使开发人员能够快速了解他们的应用程序是否受 CPU 或 GPU 限制。
注意
若要使用 GPU 分析,需要在 Unity 播放器设置中禁用图形作业。 有关更多详细信息,请参阅 Unity 的 GPU 使用情况分析器模块。
Unity 帧调试器
Unity 的帧调试器也是一个功能强大且富有洞察力的工具。 它使你能够很好地概述每个帧 GPU 正在执行的操作。 需要注意的是其他渲染目标以及要在它们之间复制的 blit 命令,因为这些在 HoloLens 上成本高昂。 理想情况下,不应在 HoloLens 上使用离屏渲染目标。 在启用昂贵的渲染 (功能时添加这些功能,例如 MSAA、HDR 或应避免) 等全屏效果。
HoloLens 帧速率叠加
设备门户 系统性能 页面有设备 CPU 和 GPU 性能的良好摘要。 可以在头戴显示设备中启用显示帧速率计数器和在头戴显示设备中显示帧速率图。 这些选项分别启用 FPS 计数器和图形,在设备上任何正在运行的应用程序中提供即时反馈。
PIX
PIX 也可用于分析 Unity 应用程序。 还有有关如何使用和安装适用于 HoloLens 2 的 PIX 的详细说明。 在开发版本中,你在 Unity 帧调试器中看到的相同作用域也会显示在 PIX 中,并且可以更详细地检查和分析。
注意
Unity 提供通过 XRSettings.renderViewportScale 属性在运行时轻松修改应用程序呈现目标分辨率的功能。 设备上显示的最终图像具有固定分辨率。 平台对较低分辨率的输出进行采样,以生成更高分辨率的图像,以便在显示器上呈现。
UnityEngine.XR.XRSettings.renderViewportScale = 0.7f;
CPU 性能建议
以下内容介绍了更深入的性能做法,特别针对 Unity & C# 开发。
缓存引用
我们建议在初始化时缓存对所有相关组件和游戏对象的引用,因为重复的函数调用(如 GetComponent<T> () 和 Camera.main )相对于存储指针的内存成本更高。 Camera.main 只是在下面使用 FindGameObjectsWithTag () ,这会昂贵地在场景图中搜索带有 “MainCamera” 标签的相机对象。
using UnityEngine;
using System.Collections;
public class ExampleClass : MonoBehaviour
{
private Camera cam;
private CustomComponent comp;
void Start()
{
cam = Camera.main;
comp = GetComponent<CustomComponent>();
}
void Update()
{
// Good
this.transform.position = cam.transform.position + cam.transform.forward * 10.0f;
// Bad
this.transform.position = Camera.main.transform.position + Camera.main.transform.forward * 10.0f;
// Good
comp.DoSomethingAwesome();
// Bad
GetComponent<CustomComponent>().DoSomethingAwesome();
}
}
注意
避免 GetComponent (字符串)
使用 GetComponent () 时,有一些不同的重载。 请务必始终使用基于类型的实现,而不是基于字符串的搜索重载。 在场景中按字符串搜索比按类型搜索成本更高。
(良好的) 组件 GetComponent (类型类型)
(良好的) GetComponent<T> ()
(错误的) 组件 GetComponent (字符串) >
避免昂贵的操作
避免使用 LINQ
尽管 LINQ 可以干净且易于读写,但它通常比手动编写算法需要更多的计算和内存。
// Example Code using System.Linq; List<int> data = new List<int>(); data.Any(x => x > 10); var result = from x in data where x > 10 select x;常见 Unity API
某些 Unity API 虽然有用,但执行成本可能很高。 其中大多数涉及搜索整个场景图以寻找一些匹配的游戏对象列表。 通常可以通过缓存引用或为 GameObjects 实现管理器组件来避免这些操作,以便在运行时跟踪引用。
GameObject.SendMessage() GameObject.BroadcastMessage() UnityEngine.Object.Find() UnityEngine.Object.FindWithTag() UnityEngine.Object.FindObjectOfType() UnityEngine.Object.FindObjectsOfType() UnityEngine.Object.FindGameObjectsWithTag() UnityEngine.Object.FindGameObjectsWithTag()
注意
应不惜一切代价消除 SendMessage () 和 BroadcastMessage () 。 这些函数的速度可能比直接函数调用慢 1000 倍。
谨防拳击
Boxing 是 C# 语言和运行时的核心概念。 这是将值类型变量(如
char、intbool、 等)包装到引用类型变量中的过程。 当值类型的变量被“装箱”时,它会包装在存储System.Object在托管堆上的 中。 内存已分配,并且最终在释放时必须由垃圾回收器处理。 这些分配和解除分配会产生性能成本,并且在许多情况下是不必要的,或者可以很容易地用更便宜的替代方案代替。为了避免装箱,请确保在其中存储数值类型和结构 (包括) 的
Nullable<T>变量、字段和属性类型设置为特定类型int,例如 ,float?MyStruct或 ,而不是使用 object。 如果将这些对象放入列表中,请务必使用强类型列表,例如List<int>ratherList<object>orArrayList。C 语言中的拳击示例#
// boolean value type is boxed into object boxedMyVar on the heap bool myVar = true; object boxedMyVar = myVar;
重复代码路径
任何重复Unity回调函数 (即每秒执行多次的更新) 和/或帧都应小心编写。 此处任何昂贵的操作都会对性能产生巨大且一致的影响。
空回调函数
尽管下面的代码似乎无害地留在您的应用程序中,特别是由于每个 Unity 脚本都使用 Update 方法自动初始化,但这些空回调可能会变得昂贵。 Unity 在非托管代码边界和托管代码边界之间、UnityEngine 代码和应用程序代码之间来回运行。 通过此网桥进行上下文切换的成本相当高,即使没有要执行的内容也是如此。 如果你的应用有 100 多个带有空重复 Unity 回调的组件的 GameObject,则这尤其成问题。
void Update() { }
注意
更新 () 是此性能问题的最常见表现,但其他重复的 Unity 回调(例如以下情况)可能同样糟糕,甚至更糟:FixedUpdate () 、LateUpdate () 、OnPostRender“、OnPreRender () 、OnRenderImage () 等。
支持每帧运行一次的操作
以下 Unity API 是许多全息应用的常见操作。 尽管并非总是可行的,但这些函数的结果通常可以计算一次,并在给定帧的整个应用程序中重复使用结果。
- 最佳做法是使用专用的单一实例类或服务来处理场景中的凝视光线投射,然后在所有其他场景组件中重复使用此结果,而不是由每个组件进行重复和相同的光线投射操作。 某些应用程序可能需要来自不同源或针对不同 LayerMask 的光线投射。
UnityEngine.Physics.Raycast() UnityEngine.Physics.RaycastAll()- 通过缓存“开始” () “或”唤醒“ () 中的引用,避免在更新 () 等重复Unity回调中执行 GetComponent () 操作
UnityEngine.Object.GetComponent()- 最佳做法是在初始化时实例化所有对象(如果可能),并使用 对象池在 应用程序的整个运行时回收和重用 GameObject
UnityEngine.Object.Instantiate()避免接口和虚拟构造
通过接口与直接对象调用函数调用或调用虚拟函数通常比使用直接构造或直接函数调用要昂贵得多。 如果虚拟函数或接口是不必要的,则应将其删除。 但是,如果使用它们可以简化开发协作、代码可读性和代码可维护性,那么这些方法的性能损失是值得权衡的。
通常,建议不要将字段和函数标记为虚拟,除非明确期望需要覆盖此成员。 对于每帧多次甚至每帧调用一次的高频代码路径(例如方法
UpdateUI()),应特别小心。避免按值传递结构
与类不同,结构是值类型,当直接传递给函数时,它们的内容会复制到新创建的实例中。 此副本会增加 CPU 成本,以及堆栈上的更多内存。 对于小型结构,效果很小,因此可以接受。 但是,对于每个帧重复调用的函数和采用较大结构的函数,如果可能,请修改函数定义以通过引用传递。 在此处了解详细信息
其他
物理学
一般来说,改进物理的最简单方法是限制花在物理上的时间或每秒迭代次数。 这会降低模拟准确性。 请参阅 Unity 中的 TimeManager。
Unity 中的碰撞器类型具有截然不同的性能特征。 以下顺序从左到右列出了性能最高的碰撞体到性能最差的碰撞体。 请务必避免使用网格碰撞器,因为网格碰撞器比原始碰撞器贵得多。
球体 < 胶囊 < 盒 <<< 网格体 (凸面) < 网格体 (非凸面)
动画
通过禁用 Animator 组件来禁用空闲动画 (禁用游戏对象不会产生相同的效果) 。 避免动画师坐在循环中将值设置为同一事物的设计模式。 此技术有相当大的开销,对应用程序没有影响。 在此了解更多信息。
复杂算法
如果您的应用程序使用复杂的算法,例如反向运动学、路径查找等,请寻找更简单的方法或调整其性能的相关设置。
CPU 到 GPU 性能建议
通常,CPU 到 GPU 的性能取决于提交给显卡的绘制调用。 若要提高性能,需要从战略性上 ) 减少 绘制调用或 重组) 以 获得最佳结果。 由于绘图调用本身是资源密集型的,减少绘图调用将减少所需的整体工作。 此外,绘图调用之间的状态更改需要图形驱动程序中昂贵的验证和转换步骤,因此,重构应用程序的绘图调用以限制状态更改 ((即不同的材料等 ) 可以提高性能。
Unity 有一篇很棒的文章,它概述了并深入探讨了他们平台的批量绘制调用。
单次传递实例化呈现
Unity 中的单传递实例化渲染允许将每只眼睛的绘制调用减少为一个实例化绘制调用。 由于两个绘图调用之间的缓存一致性,GPU 上也有一些性能改进。
若要在 Unity 项目中启用此功能
- 打开“OpenXR 设置” (转到“编辑>项目设置>”、“XR 插件管理>”、“OpenXR) ”。
- 从 渲染模式(Render Mode) 下拉菜单中选择 单通道实例化(Single Pass Instanced)。
阅读 Unity 的以下文章,了解有关此渲染方法的详细信息。
注意
如果开发人员已有未为实例化编写的现有自定义着色器,则会出现单次传递实例化渲染的一个常见问题。 启用此功能后,开发人员可能会注意到某些游戏对象仅在一只眼睛中呈现。 这是因为关联的自定义着色器没有用于实例化的适当属性。
静态批处理
Unity 能够批处理许多静态对象,以减少对 GPU 的绘制调用。 静态批处理适用于大多数渲染器对象,Unity 1 个) 共享相同的材质,2 个) 都标记为静态 (选择 Unity 中的对象,然后选择检查器) 右上角的复选框。 标记为 静态 的游戏对象无法在整个应用程序的运行时移动。 因此,静态批处理可能很难在 HoloLens 上应用,因为因为几乎每个对象都需要放置、移动、缩放等。对于沉浸式头戴显示设备,静态批处理可以显著减少绘图调用,从而提高性能。
有关更多详细信息,请阅读 Unity 中的绘图调用批处理下的静态批处理。
动态批处理
由于在 HoloLens 开发中将对象标记为 静态 对象存在问题,因此动态批处理可以成为弥补这一不足功能的绝佳工具。 它还可用于沉浸式头戴显示设备。 但是,Unity中的动态批处理可能很难启用,因为游戏对象必须 ) 共享相同的材质,并且 ) 满足一长串其他条件。
有关完整列表,请阅读 Unity 中的“绘图调用批处理”下的“动态批处理”。 最常见的是,游戏对象对于动态批处理无效,因为关联的网格数据最多只能超过 300 个顶点。
其他技术
仅当多个游戏对象能够共享相同的材料时,才能进行批处理。 通常,这会因游戏对象需要为其各自的材料具有唯一纹理而受阻。 通常将材质合并为一个大型材质,这种方法被称为 Texture Atlasing。
此外,最好在可能且合理的情况下将网格合并到一个游戏对象中。 Unity 中的每个渲染器都有其关联的绘制调用,而不是在一个渲染器下提交组合网格。
注意
在运行时修改 Renderer.material 的属性会创建材质的副本,因此可能会中断批处理。 使用 Renderer.sharedMaterial 修改游戏对象之间的共享材料属性。
GPU 性能建议
带宽和填充率
在 GPU 上呈现帧时,应用程序要么受内存带宽,要么受填充率的约束。
-
内存带宽 是 GPU 可以从内存中执行的读取和写入的速率
- 在 Unity 中,在“编辑>项目设置>”“质量设置”中更改纹理质量。
-
填充率 是指 GPU 每秒可绘制的像素。
- 在 Unity 中,使用 XRSettings.renderViewportScale 属性。
优化深度缓冲区共享
建议 启用 深度缓冲区共享 以优化 全息影像稳定性。 使用此设置启用基于深度的后期重新投影时,建议选择 16 位 深度格式,而不是 24 位 深度格式。 16 位深度缓冲区将大大减少带宽 (,从而大大降低与深度缓冲区流量相关的电源) 。 这在功耗降低和性能方面都有很大的改进。 但是,使用 16 位深度格式有两种可能的负面结果。
Z-Fighting
深度范围保真度的降低使得 16 位比 24 位更有可能发生 z 战斗 。 为避免这些伪影,请修改 Unity 相机的近/远剪辑平面以解决较低精度的问题。 对于基于 HoloLens 的应用程序,50 米(而不是 Unity 默认的 1,000 米)的远裁剪平面通常可以消除任何 z 争斗。
禁用的模具缓冲区
当 Unity 创建具有 16 位深度的呈现纹理时,不会创建模具缓冲区。 选择 24 位深度格式(如 Unity 文档中所述)将创建一个 24 位 z 缓冲区和一个 8 位模具缓冲区, (如果 32 位适用于设备 (例如 HoloLens) ,这通常是) 情况。
避免全屏效果
在全屏上运行的技术可能成本高昂,因为它们的数量级是每帧数百万次操作。 建议避免后 期处理效果 ,例如抗锯齿、泛光等。
最佳照明设置
Unity 中的实时全局照明可以提供出色的视觉效果,但涉及昂贵的照明计算。 我们建议通过 Window>Rendering>Lighting Settings> 为每个 Unity 场景文件禁用实时全局照明 取消选中 Real-time Global Illumination。
此外,建议禁用所有阴影投射,因为这些还会向 Unity 场景添加昂贵的 GPU 传递。 阴影可以按光禁用,但也可以通过质量设置进行整体控制。
编辑>“项目设置”,然后选择 “质量 ”类别 > ,为 UWP 平台选择“ 低质量 ”。 也可以将 Shadows 属性设置为 禁用阴影。
建议对 Unity 中的模型使用烘焙照明。
减少多边形数量
多边形计数将减少
- 从场景中删除对象
- 资产简化,可减少给定网格的多边形数量
- 在应用程序中实现细节 层次 (LOD) 系统 ,以相同几何图形的低多边形版本渲染远景对象
了解 Unity 中的着色器
比较着色器性能的一个简单近似值是确定每个着色器在运行时执行的平均操作数。 这可以在 Unity 中轻松完成。
选择着色器资产或选择材质,然后选择检查器窗口的右上角。 选择齿轮图标,然后选择 “选择着色器”。
选择着色器资产后,选择检查器窗口下的 “编译并显示代码” 按钮。
编译后,在结果中查找统计信息部分,其中包含顶点着色器和像素着色器的不同操作数 (注意: 像素着色器通常也称为片段着色器) 。
优化像素着色器
使用上述方法查看编译的统计信息结果,平均而言, 片段着色器 通常比 顶点着色器执行更多操作。 片段着色器(也称为像素着色器)在屏幕输出上按像素执行,而顶点着色器仅按要绘制到屏幕的所有网格的每个顶点执行。
因此,不仅由于所有照明计算,片段着色器比顶点着色器具有更多的指令,而且片段着色器几乎总是在较大的数据集上执行。 例如,如果屏幕输出是 2k x 2k 图像,则片段着色器可以执行 2,000*2,000 = 4,000,000 次。 如果呈现两只眼睛,则此数字将加倍,因为有两个屏幕。 如果混合现实应用程序具有多个通道、全屏后处理效果或将多个网格呈现到同一像素,则此数字会显著增加。
因此,与顶点着色器中的优化相比,减少片段着色器中的操作数通常可以提供更大的性能提升。
Unity Standard着色器备选方案
考虑使用性能更强、价格更低的着色器,而不是使用基于物理 (PBR) 或其他高质量着色器进行渲染。 混合现实工具包提供针对混合现实项目优化的 MRTK 标准着色器。
Unity 还提供非照明、顶点亮、漫反射和其他简化的着色器选项,与Unity Standard着色器相比,这些选项速度更快。 有关详细信息,请参阅 内置着色器的用法和性能。
着色器预加载
使用 着色器预加载 和其他技巧优化 着色器加载时间。 具体而言,着色器预加载意味着你不会看到由于运行时着色器编译而导致的任何卡顿。
限制过度绘制
在 Unity 中,可以通过切换场景视图左上角的绘图模式菜单并选择过度绘制来显示其场景的过度绘制。
通常,可以通过在将对象发送到 GPU 之前提前剔除对象来缓解过度绘制。 Unity 提供了有关为其引擎实现遮蔽剔除的详细信息。
内存建议
过多的内存分配 & 取消分配操作可能会对全息应用程序产生不利影响,导致性能不一致、冻结帧和其他有害行为。 在 Unity 中开发时,了解内存注意事项尤为重要,因为内存管理由垃圾回收器控制。
垃圾收集
当 GC 激活以分析在执行过程中不再处于范围内的对象,并且需要释放其内存以便使其可供重复使用时,全息应用会丢失 GC) (垃圾收集器的处理计算时间。 常量分配和取消分配通常会要求垃圾回收器更频繁地运行,从而损害性能和用户体验。
导致垃圾收集过多的最常见做法之一是在 Unity 开发中没有缓存对组件和类的引用。 任何引用都应在 Start () 或 Awake () 期间捕获,并在后续函数(例如 Update () 或 LateUpdate () )中重复使用。
其他快速提示:
- 使用 StringBuilder C# 类在运行时动态生成复杂字符串。
- 删除不再需要的调用 Debug.Log () ,因为它们仍会在应用的所有生成版本中执行
- 如果全息应用通常需要大量内存,请考虑在加载阶段(例如显示加载或转换屏幕时)调用 System.GC.Collect () 。
对象池
对象池是一种流行的技术,用于降低连续对象分配和解除分配的成本。 这是通过分配一个包含相同对象的大型池,并重用此池中的非活动可用实例,而不是随着时间的推移不断生成和销毁对象来实现的。 对象池非常适合在应用期间具有可变生存期的可重用组件。
启动性能
请考虑从较小的场景开始应用,然后使用 SceneManager.LoadSceneAsync 加载场景的其余部分。 这允许应用尽快进入交互状态。 激活新场景时,可能会出现较大的 CPU 峰值,并且任何呈现的内容都可能卡顿或卡顿。 解决此问题的一种方法是在正在加载的场景上将 AsyncOperation.allowSceneActivation 属性设置为“false”,等待场景加载,将屏幕清除为黑色,然后将其设置回“true”以完成场景激活。
请记住,在加载启动场景时,会向用户显示全息初始屏幕。