Gambaran umum suara spasial
Dalam kehidupan nyata, suara spasial sangat penting. Ketika seseorang memanggil nama Anda, Anda tahu cara untuk melihat. Jika Anda menjatuhkan koin di trotoar, Anda dapat mengetahui cara yang telah digulung. Mengapa? Karena Anda dapat mendengar "secara spasial"--dengan kata lain, Anda dapat mengetahui di mana suara terjadi di lingkungan Anda.
Dalam aplikasi realitas campuran, Anda mungkin harus mencari ke atas, bawah, dari sisi ke sisi, atau di belakang Anda untuk menemukan sesuatu yang terjadi. Kadang-kadang, tidak jelas di mana Anda harus melihat. Suara spasial menghubungkan hologram lebih dalam ke dunia realitas campuran dan menyediakan informasi tentang lingkungan dan status objek. Anda dapat memberikan isjin dari arah yang ingin Anda tarik perhatiannya; ini membantu pengguna untuk menjaga kesadaran akan lingkungan dunia nyata mereka dan dapat membimbing mereka ke langkah-langkah berikutnya. Ini meningkatkan kepercayaan pengguna pada gerakan dan interaksi suara.
Penggunaan suara dalam realitas campuran membutuhkan pendekatan yang berbeda dari aplikasi sentuhan dan keyboard-dan-mouse. Keputusan desain suara utama mencakup suara mana yang akan spasialisasi dan interaksi mana yang akan di sonifikasi. Untuk panduan mendetail, lihat artikel Praktik terbaik suara spasial kami.
Spasialisasi
Spasialisasi adalah komponen arah suara spasial. Untuk pengaturan teater rumah 7.1, spasialisasi semudah menggeser di antara pengeras suara. Tetapi untuk headphone dalam realitas campuran, penting untuk menggunakan teknologi berbasis HRTF untuk akurasi dan kenyamanan. Windows menawarkan spasialisasi berbasis HRTF, dan dukungan ini dipercepat perangkat keras pada HoloLens 2.
Untuk saran tentang penggunaan spasialisasi yang efektif dalam aplikasi Anda, lihat Praktik terbaik suara spasial.
Dukungan perangkat
| Fitur | HoloLens (generasi pertama) | HoloLens 2 | Headset imersif |
| Spasialisasi | ✔️ | ✔️ | ✔️ |
| Akselerasi perangkat keras spasialisasi | ❌ | ✔️ | ❌ |
Studi kasus
HoloTour secara virtual membawa pengguna ke situs wisata dan sejarah di seluruh dunia. Lihat desain Suara untuk studi kasus HoloTour . Mikrofon khusus dan pengaturan penyajian digunakan untuk mengambil ruang subjek.
RoboRaid adalah penembak energi tinggi untuk HoloLens. Studi kasus Desain Sound untuk RoboRaid menjelaskan pilihan desain yang dibuat untuk memastikan suara spasial digunakan untuk efek dramatis sepenuhnya.
Personalisasi spasializer
Pelacakan kepala latensi rendah dari headset realitas campuran, termasuk HoloLens, mendukung spasialisasi berbasis HRTF berkualitas tinggi.
HRTF memanipulasi perbedaan tingkat dan fase antara telinga di seluruh spektrum frekuensi. Mereka didasarkan pada model fisik dan pengukuran kepala manusia, tubuh, dan bentuk telinga (pinnae). Otak kita menanggapi perbedaan ini untuk memberikan arah yang dirasakan dalam suara.
Setiap individu memiliki bentuk telinga, ukuran kepala, dan posisi telinga yang unik. Jadi HRTF terbaik sesuai dengan Anda. Untuk meningkatkan akurasi spasialisasi, HoloLens menggunakan jarak antar-pupilary (IPD) Anda dari tampilan headset untuk menyesuaikan HRTF untuk ukuran kepala Anda.
Dukungan platform spasializer
Windows menawarkan spasialisasi, termasuk HRTF, melalui ISpatialAudioClient API. API ini memaparkan akselerasi perangkat keras HRTF HoloLens 2 ke aplikasi.
Dukungan middleware spasializer
Dukungan untuk HRTF Windows tersedia untuk mesin audio pihak ketiga berikut.
Akustik
Suara spasial lebih dari sekadar arah. Dimensi lain termasuk oklusi, penghalang, gaung, portal, dan pemodelan sumber. Secara kolektif dimensi ini disebut sebagai akustik. Tanpa akustik, suara spasial tidak memiliki jarak yang dirasakan.
Perawatan akustik berkisar dari sederhana hingga kompleks. Anda dapat menggunakan gaung yang didukung oleh mesin audio apa pun untuk mendorong suara spasial ke lingkungan pendengar. Sistem akustik seperti Akustik Proyek memberikan perawatan akustik yang lebih kaya dan lebih menarik. Akustik Proyek dapat memodelkan efek dinding, pintu, dan geometri adegan lainnya pada suara. Ini adalah opsi yang efektif untuk kasus di mana geometri adegan yang relevan diketahui pada waktu pengembangan.