Vue d’ensemble du son spatial

Dans la réalité, le son spatial est vital. Quand quelqu’un appelle votre nom, vous savez à quoi ressemble la solution. Si vous déposez une pièce de monnaie sur le trottoir, vous pouvez déterminer la manière dont elle a été restaurée. Pourquoi ? Étant donné que vous pouvez entendre « spatialement », en d’autres termes, vous pouvez indiquer où se trouve le son dans votre environnement.

Dans une application de réalité mixte, vous devrez peut-être Rechercher, baisser, de côté à côté ou en arrière-plan pour trouver un événement qui se produit. Il peut arriver que vous ne soyez pas certain de l’emplacement de votre recherche. Le son spatial connecte les hologrammes plus profondément au monde de réalité mixte et fournit des informations sur l’environnement et l’état de l’objet. Vous pouvez fournir des piles à partir de la direction dans laquelle vous souhaitez attirer l’attention. Cela aide les utilisateurs à prendre conscience de leur environnement réel et peuvent les guider vers les étapes suivantes. Cela augmente la confiance des utilisateurs dans les interactions entre les mouvements et les voix.



L’utilisation de sons dans une réalité mixte requiert une approche différente de celle des applications tactiles et du clavier et de la souris. Les décisions relatives à la conception de sons clés incluent les sons à spatialiser et les interactions à sonify. Pour obtenir des instructions détaillées, consultez notre article sur les meilleures pratiques relatives aux sons spatiaux .

Spatialisation

Spatialization est le composant directionnel du son spatial. Pour une configuration 7,1 Home cinéma, Spatialization est aussi simple que le panoramique entre les haut-parleurs. Mais pour le casque en réalité mixte, il est essentiel d’utiliser une technologie HRTF pour la précision et le confort. Windows offre des spatialization basés sur HRTF, et cette prise en charge est l’accélération matérielle sur HoloLens 2.

Pour obtenir des suggestions sur l’utilisation effective de Spatialization dans votre application, consultez meilleures pratiques pour le son spatial.

Prise en charge des appareils

Fonctionnalité HoloLens (première génération) HoloLens 2 Casques immersifs
Spatialisation ✔️ ✔️ ✔️
Accélération matérielle Spatialization ✔️

Études de cas

HoloTour prend pratiquement les utilisateurs sur des sites touristiques et historiques dans le monde entier. Consultez l’étude de cas Sound Design for HoloTour . Un microphone spécial et une configuration de rendu ont été utilisés pour capturer les espaces de sujet.

RoboRaid est un tir à haute énergie pour HoloLens. L’étude de cas de conception audio pour RoboRaid décrit les choix de conception qui ont été effectués pour garantir que le son spatial était utilisé à l’effet le plus spectaculaire.

Personnalisation de Spatializer

le suivi de la tête à faible latence des casques de réalité mixte, y compris HoloLens, prend en charge les spatialization HRTF de haute qualité.

Les HRTFs manipulent les différences de niveau et de phase entre les oreilles à travers le spectre de fréquences. Ils sont basés sur des modèles physiques et des mesures de la tête humaine, du tors et des formes d’oreille (pinnae). Notre cerveau répond à ces différences pour fournir un sens sonore.

Chaque individu a une forme auriculaire, une taille de tête et une position Ear uniques. Le meilleur HRTFs est donc conforme à vos exigences. pour augmenter la précision de la spatialization, HoloLens utilise votre distance inter-pupille (IPD) à partir du casque pour ajuster la HRTFs de la taille de la tête.

Prise en charge de la plateforme Spatializer

Windows offre spatialization, y compris HRTFs, via l' API ISpatialAudioClient. cette API expose le HoloLens 2 l’accélération matérielle HRTF aux applications.

Prise en charge de l’intergiciel Spatializer

la prise en charge de Windows’HRTFs’est disponible pour les moteurs audio tiers suivants.

Acoustique

Le son spatial est plus qu’une direction. Les autres dimensions incluent l’occlusion, l’obstruction, la réverbération, le portail et la modélisation source. Ces dimensions sont collectivement appelées « acoustiques». Sans acoustiques, les sons spatiaux n’ont pas de distance perçue.

Les traitements acoustiques vont de simples à complexes. Vous pouvez utiliser un verbe pris en charge par n’importe quel moteur audio pour envoyer des sons spatiales dans l’environnement de l’écouteur. les systèmes acoustiques, tels que les Project acoustiques , permettent un traitement des acoustiques plus riche et plus attrayant. les Project acoustiques peuvent modéliser l’effet des murs, des portes et d’autres géométries de scène sur un son. C’est une option efficace pour les cas où la géométrie de scène appropriée est connue au moment du développement.

Étapes suivantes