Přehled prostorového zvuku
V reálném životě je prostorový zvuk zásadní. Když někdo zavolá vaše jméno, víte, jak se má hledat. Pokud na chodník zahodíte minci, poznáte, jakým směrem se valila. Proč? Protože můžete slyšet "prostorově" – jinými slovy, můžete zjistit, kde se zvuk ve vašem prostředí vyskytuje.
V aplikaci hybridní reality možná budete muset hledat nahoru, dolů, ze strany na stranu nebo za sebou, abyste našli něco, co se děje. Někdy může být nejasné, kde byste měli hledat. Prostorový zvuk propojuje hologramy hlouběji se světem hybridní reality a poskytuje informace o prostředí a stavu objektů. Můžete poskytnout signály ze směru, na který chcete upoutat pozornost; to pomáhá uživatelům udržet si povědomí o jejich skutečném okolí a může je vést k dalším krokům. To zvyšuje důvěru uživatelů při gestech a hlasové interakci.
Používání zvuků v hybridní realitě vyžaduje jiný přístup než v aplikacích pro dotykové ovládání a klávesnici a myš. Mezi klíčová rozhodnutí o návrhu zvuku patří zvuky, které se mají prostorově zvětšovat a které interakce se mají zobecnit. Podrobné pokyny najdete v článku o osvědčených postupech pro prostorový zvuk .
Prostorová analýza
Prostorová část je směrová složka prostorového zvuku. Pro domácí kino 7.1 nastavení, prostorové je stejně jednoduché jako posouvání mezi reproduktory. U sluchátek v hybridní realitě je ale pro přesnost a pohodlí nezbytné používat technologii založenou na HRTF . Systém Windows nabízí prostorovou technologii založenou na HRTF a tato podpora je hardwarově akcelerovaná na HoloLens 2.
Návrhy na efektivní využití prostorovéizace ve vaší aplikaci najdete v tématu Osvědčené postupy pro prostorový zvuk.
Podpora zařízení
| Funkce | HoloLens (první generace) | HoloLens 2 | Imerzivní náhlavní soupravy |
| Prostorová analýza | ✔️ | ✔️ | ✔️ |
| Hardwarová akcelerace prostorové analýzy | ❌ | ✔️ | ❌ |
Případové studie
HoloTour prakticky zavede uživatele na turistická a historická místa po celém světě. Viz Případová studie Návrh zvuku pro HoloTour . K zachycení předmětných prostorů se použil speciální mikrofon a nastavení vykreslování.
RoboRaid je vysoce energy střelec pro HoloLens. Případová studie Sound design for RoboRaid (Návrh zvuku pro RoboRaid ) popisuje volby návrhu, které byly provedeny, aby se zajistilo, že prostorový zvuk bude využit naplno.
Přizpůsobení spatializátoru
Sledování hlav s nízkou latencí u náhlavních souprav pro hybridní realitu, včetně HoloLensu, podporuje vysoce kvalitní prostorovou technologii založenou na HRTF.
Funkce HRTFs manipulují s rozdíly úrovní a fází mezi ušima napříč frekvenčním spektrem. Jsou založeny na fyzických modelech a měřeních lidské hlavy, trupu a tvarů uší (pinnae). Náš mozek reaguje na tyto rozdíly a poskytuje vnímaný směr zvuku.
Každý jednotlivec má jedinečný tvar ucha, velikost hlavy a polohu ucha. Nejlepší HRTFs tedy odpovídají vám. Ke zvýšení prostorové přesnosti holoLens používá vaši vzdálenost mezi žáky (IPD) od displejů náhlavní soupravy k úpravě HRTFs pro velikost hlavy.
Podpora platformy Spatializer
Systém Windows nabízí prostorovou analýzu, včetně HRTFs, prostřednictvím rozhraní API ISpatialAudioClient. Toto rozhraní API zpřístupňuje aplikacím hardwarovou akceleraci HoloLens 2 HRTF.
Podpora middlewaru Spatializer
Podpora pro hrtfs systému Windows je k dispozici pro následující zvukové moduly třetích stran.
Akustika
Prostorový zvuk je víc než jen o směru. Mezi další dimenze patří okluze, překážky, reverb, portáling a modelování zdrojů. Souhrnně se tyto dimenze označují jako akustika. Bez akustiky chybí prostorové zvuky vnímanou vzdálenost.
Akustika se pohybuje od jednoduchých po komplexní. K odeslání prostorových zvuků do prostředí naslouchacího procesu můžete použít ozvěnu podporovanou jakýmkoli zvukovým modulem. Akustické systémy, jako je Project Acoustics , poskytují bohatší a působivější akustiku. Project Acoustics dokáže modelovat efekt zdí, dveří a dalších geometrií scén na zvuk. Jedná se o efektivní možnost pro případy, kdy je v době vývoje známa relevantní geometrie scény.