Omówienie dźwięku przestrzennego
W prawdziwym życiu dźwięk przestrzenny ma kluczowe znaczenie. Kiedy ktoś nazywa twoje imię, wiesz, w jaki sposób spojrzeć. Jeśli upuścisz monetę na chodniku, możesz powiedzieć, w jaki sposób toczył się. Dlaczego? Ponieważ można usłyszeć "przestrzennie"- innymi słowy, możesz powiedzieć, gdzie w twoim środowisku występuje dźwięk.
W aplikacji rzeczywistości mieszanej może być konieczne wyszukanie, w górę, w dół, od boku do strony lub za tobą, aby znaleźć coś, co się dzieje. Czasami nie jest jasne, gdzie należy spojrzeć. Dźwięk przestrzenny łączy hologramy głębiej ze światem rzeczywistości mieszanej i dostarcza informacje o stanie środowiska i obiektu. Możesz podać wskazówki z kierunku, do którego chcesz zwrócić uwagę; pomaga to użytkownikom w utrzymaniu świadomości swojego rzeczywistego otoczenia i może kierować ich do następnych kroków. Zwiększa to zaufanie użytkownika do interakcji gestów i głosu.
Użycie dźwięków w rzeczywistości mieszanej wymaga innego podejścia niż w aplikacjach dotykowych i klawiaturowych i myszy. Kluczowe decyzje projektowe brzmią, które dźwięki mają być przestrzennie i które interakcje z sonifikują. Aby uzyskać szczegółowe wskazówki, zobacz nasz artykuł Dotyczący najlepszych rozwiązań dotyczących dźwięku przestrzennego .
Przestrzennie
Przestrzenność jest elementem kierunkowym dźwięku przestrzennego. W przypadku instalacji 7.1 kina domowego, przestrzennie jest tak proste, jak przesuwanie między głośnikami. Ale w przypadku słuchawek w rzeczywistości mieszanej niezbędne jest użycie technologii hrTF na potrzeby dokładności i komfortu. System Windows oferuje obsługę przestrzenną opartą na formacie HRTF, a ta obsługa jest przyspieszana sprzętowo na HoloLens 2.
Aby uzyskać sugestie dotyczące efektywnego wykorzystania przestrzenności w aplikacji, zobacz Spatial sound best practices (Najlepsze rozwiązania dotyczące dźwięku przestrzennego).
Obsługa urządzeń
| Funkcja | HoloLens (pierwsza generacja) | HoloLens 2 | Immersyjne zestawy słuchawkowe |
| Przestrzennie | ✔️ | ✔️ | ✔️ |
| Przyspieszanie sprzętowe przestrzennie | ❌ | ✔️ | ❌ |
Analizy przypadków
HoloTour praktycznie zabiera użytkowników do miejsc turystycznych i historycznych na całym świecie. Zapoznaj się z projektem dźwięku na potrzeby analizy przypadku urządzenia HoloTour . Do przechwytywania przestrzeni tematu użyto specjalnego mikrofonu i konfiguracji renderowania.
RoboRaid jest strzelcem o wysokiej energii dla HoloLens. Projekt dźwięku dla badania przypadku RoboRaid opisuje wybory projektowe, które zostały wykonane w celu zapewnienia dźwięku przestrzennego był używany do najpełniejszego dramatycznego efektu.
Personalizacja przestrzenna
Śledzenie zestawów nagłownych rzeczywistości mieszanej, w tym HoloLens, zapewnia wysokiej jakości obsługę przestrzennych opartych na formacie HRTF.
HrTFs manipuluje poziomem i różnicami fazowymi między uszami w spektrum częstotliwości. Są one oparte na modelach fizycznych i pomiarach ludzkiej głowy, tułowia i kształtów ucha (pinnae). Nasze mózgi reagują na te różnice, aby zapewnić postrzegany kierunek w dźwięku.
Każda osoba ma unikatowy kształt ucha, rozmiar głowy i położenie ucha. Dlatego najlepsze hrTFs są zgodne z Tobą. Aby zwiększyć dokładność przestrzenności, urządzenie HoloLens używa odległości między uczniami (IPD) z wyświetlaczy zestawu nagłownego w celu dostosowania plików HRTFs dla rozmiaru głowy.
Obsługa platformy Spatializer
System Windows oferuje przestrzennie, w tym hrTFs, za pośrednictwem interfejsu API ISpatialAudioClient. Ten interfejs API uwidacznia HoloLens 2 przyspieszanie sprzętowe HRTF do aplikacji.
Obsługa oprogramowania pośredniczącego spatializer
Obsługa hrTFs systemu Windows jest dostępna dla następujących aparatów audio innych firm.
Akustyka
Dźwięk przestrzenny jest bardziej niż kierunek. Inne wymiary obejmują okluzji, przeszkodę, reverb, portaling i modelowanie źródłowe. Zbiorczo te wymiary są określane jako akustyka. Bez akustyki dźwięk przestrzenny nie ma postrzeganej odległości.
Zabiegi akustyczne wahają się od prostych do złożonych. Możesz użyć reverb, który jest obsługiwany przez dowolny aparat audio, aby wypchnąć przestrzenne dźwięki do środowiska odbiornika. Systemy akustyczne, takie jak Project Acoustics , zapewniają bogatsze i bardziej atrakcyjne zabiegi akustyczne. Akustyka projektu może modelować wpływ ścian, drzwi i innej geometrii sceny na dźwięk. Jest to skuteczna opcja dla przypadków, w których odpowiednia geometria sceny jest znana w czasie opracowywania.