공간 사운드 개요
실제 생활에서 공간 사운드는 매우 중요합니다. 누군가가 당신의 이름을 호출 할 때, 당신은 볼 수있는 방법을 알고있다. 당신이 보도에 동전을 떨어 뜨리면, 당신은 그것이 압연 된 방법을 알 수 있습니다. 그 이유는 즉, "공간적으로"가 들릴 수 있으므로 환경에서 소리가 발생하는 위치를 알 수 있습니다.
혼합 현실 앱에서는 무슨 일이 일어나고 있는지 찾기 위해 위아래로, 좌우 또는 뒤에서 조회해야 할 수 있습니다. 때때로, 그것은 당신이 봐야 할 곳을 불분명 할 수 있습니다. 공간 사운드는 홀로그램을 혼합 현실 세계에 더 깊이 연결하고 환경 및 개체 상태에 대한 정보를 제공합니다. 주의를 끌 방향에서 신호를 제공할 수 있습니다. 이렇게 하면 사용자가 실제 환경에 대한 인식을 유지하고 다음 단계로 안내할 수 있습니다. 이렇게 하면 제스처 및 음성 상호 작용에 대한 사용자 신뢰도가 높아질 수 있습니다.
혼합 현실에서 소리를 사용하려면 터치 및 키보드 및 마우스 애플리케이션과는 다른 접근 방식이 필요합니다. 주요 사운드 디자인 결정에는 공간화할 소리와 아들화할 상호 작용이 포함됩니다. 자세한 지침은 공간 사운드 모범 사례 문서를 참조하세요.
공간화
공간화는 공간 소리의 방향 구성 요소입니다. 7.1 홈 시어터 설치의 경우 공간화는 라우드 스피커 사이를 이동시키는 것만큼 간단합니다. 그러나 혼합 현실의 헤드폰의 경우 정확도와 편안함을 위해 HRTF 기반 기술을 사용하는 것이 중요합니다. Windows는 HRTF 기반 공간화를 제공하며, 이 지원은 HoloLens 2 하드웨어 가속입니다.
애플리케이션에서 공간화의 효과적인 사용에 대한 제안은 공간 사운드 모범 사례를 참조하세요.
디바이스 지원
| 기능 | HoloLens(1세대) | HoloLens 2 | 몰입형 헤드셋 |
| 공간화 | ✔️ | ✔️ | ✔️ |
| 공간화 하드웨어 가속 | ❌ | ✔️ | ❌ |
사례 연구
HoloTour는 사실상 전 세계의 관광 및 유적지로 사용자를 데려갑니다. HoloTour 사례 연구를 위한 사운드 디자인을 참조하세요. 특수 마이크 및 렌더링 설정이 주체 공간을 캡처하는 데 사용되었습니다.
RoboRaid는 HoloLens의 고에너지 슈팅 게임입니다. RoboRaid 사례 연구를 위한 사운드 디자인은 공간 사운드가 가장 극적인 효과에 사용되도록 하기 위해 만들어진 디자인 선택에 대해 설명합니다.
Spatializer 개인 설정
HoloLens를 비롯한 혼합 현실 헤드셋의 대기 시간이 짧은 헤드 추적은 고품질 HRTF 기반 공간화를 지원합니다.
HRTF는 주파수 스펙트럼에서 귀 사이의 수준 및 위상 차이를 조작합니다. 인간의 머리, 몸통 및 귀 모양(pinnae)의 물리적 모델과 측정값을 기반으로 합니다. 우리의 두뇌는 소리에 인식된 방향을 제공하기 위하여 이 다름에 반응합니다.
모든 개인은 고유한 귀 모양, 머리 크기 및 귀 위치를 가지고 있습니다. 따라서 최고의 HRTF가 사용자에게 적합합니다. 공간화 정확도를 높이기 위해 HoloLens는 헤드셋 디스플레이에서 IPD(동공 간 거리)를 사용하여 헤드 크기에 맞게 HRTF를 조정합니다.
Spatializer 플랫폼 지원
Windows는 ISpatialAudioClient API를 통해 HRTF를 포함한 공간화를 제공합니다. 이 API는 HoloLens 2 HRTF 하드웨어 가속을 애플리케이션에 노출합니다.
Spatializer 미들웨어 지원
Windows의 HRTF에 대한 지원은 다음 타사 오디오 엔진에서 사용할 수 있습니다.
음향
공간 소리는 방향 그 이상입니다. 다른 차원에는 폐색, 방해, 반향, 포털링 및 원본 모델링이 포함됩니다. 전체적으로 이러한 차원을 음향이라고 합니다. 음향이 없으면 공간화된 소리에는 인식된 거리가 부족합니다.
음향 처리는 단순에서 복잡한 것까지 다양합니다. 오디오 엔진에서 지원하는 반향을 사용하여 공간화된 사운드를 수신기 환경으로 푸시할 수 있습니다. Project Acoustics와 같은 음향 시스템은 더 풍부하고 매력적인 음향 처리를 제공합니다. Project Acoustics는 벽, 문 및 기타 장면 기하 도형이 소리에 미치는 영향을 모델링할 수 있습니다. 개발 시 관련 장면 기하 도형이 알려진 경우에 효과적인 옵션입니다.